刖 


口 


先从一个小概率事件谈起。2003年11月，我从巴黎乘高速火车去伦敦 t 在 
我们车厢里，共有3名 乘客： 我和夫人及一位法国的年轻人。我偶然发现那位年 
轻人好像是在读一本数学书，就想跟他聊聊，没准他也是位数学工作者。我问他 
是否在看数学书、翻开封面一看，原来是随机过程方面（随机微分方程）的一本国 
际上十分流行的研究生教科书：我十分高兴，以为他也是研究概率论的。后来才 
知道他并不是学数学的，而只是在银行工作。虽然我早已知道随机过程理论在 
金融里有重要应用：但遇到此情此景还是十分吃惊。由这个小概率事件的发生 
可以推断 M 机过程理论受重视的普遍程度，它在科学和工程诸多领域中的广泛 
应用更是众所周知的。我猜测他会受这本书的“欺负”，因为他可能缺乏必要的 
基础， 就问他为什么要读这么难的书。他说：“我非常想知道随机积分究竟是怎 
么回事，为什么会对金融有用问完这个问题，自己却有点后悔。因为我也推 
荐不出一本适合于他的通俗读物。另一方面，我又感到十分惭愧，身为概率论工 
作者.却未能为公众提供亟须的科普读物。 

本书虽然还不是一本科普读物，但我依然希望能以尽可能小的篇幅，介绍随 
机过程理论的基础知识。为此，就需要精选主题^我们集中于“马尔可夫链”和 
“随机分析”两部分，无论从理论还是应用角度看、这两部分都应该是最重要的。 
其次， 在题材的处理上.希望做到单刀直入.避免过多地纠缠于技术性的细节。 
例如在第一部分里，我们紧紧抓住遍历性这一中心课题 ; 从有限状态空间到可数 
状态空间，从离散时间到连续时间，逐步展开 ： 逐步深入。在论证手法上、釆用了 
一些比较现代的数学工具，使得证明更为简洁。可以看出，第一部分的结构布局 
和证明方法与现有的教科书有相当大的不同。此外.在本书中，我们也希望触及 
一些现代的研究课题。例如 - 人们常说，概率论是研究随机现象中的必然规律的 
—门 学科； 然而 * 现代概率论在非随机的诸多数学分支中也发挥出了越来越大的 
威力。事实上，与其他学科之间的很强的关联，乃是本学科价值的体现和发展的 
源泉之一。关于这一点，书中也有所涉及。 

本书的形成经历了漫长的岁月^例如“强马氏性” 一节来自于1980年我在 



前 


言 


全国高等师范院校概率论学习班上授课时所找到的处埵方式。我曾先后于 U ) 即 
年和19%年两次给本科生高年级开过随机过程的选修课 U 洲年为全国数学暑 
期学校开过马尔可夫链的短课，为这些课程写过一些讲稿，但直到1999年才整 
理出本书的初稿。此后毛永华和王颖喆在本科生和研究生课中试用过多遍 & 特 
別是毛永华已连续使用了多年，作了不少加工，补充了第一章第五节 、第二章第 
四节和第七章等内容，还配备了本书的全部习题。为了不影响全书的脉絡主线, 
许多技术 性的证明细节及相关内容尽可能安排在习题中，作为正文的补充。如 
同登山一样 I 你可以走盘山路、移步换景，悠悠然到达 山顶： 也可以选择一条“捷 
径 '' 直达山顶,.博览群山：然后在下山的沿途欣赏你想看的风景。 

此外，部分兄弟院校选用此讲义作为本科或研究生的教材，如首都师范大学 
数学系、安徽师范大学数学与计算机学院等 D 另有不少同事索取了本讲义的部 
分章节的电子版作为教学和科研的参考，提出了许多宝贵 意见； 借此机会向他们 
表示由衷的感谢。同时也期盼更多的批评意见，以形成具有自己特色、又能较 
好地服务于读者的入门书。 


陈木法 

2006年 12月 B 
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第一章离散时间马氏链 


§1.1 经济最优化的数学模型与马氏链 

我们从一个经济模型开始，因为现在这个时代，人们最关心的是经济， 

投入产出法 

要: r 解经济情况、先从调査入手.首先 T 把我们所关心的主要产品和劳务列 
为"_，)):称为产综，这里，我们固定各产品的单位， 如电： kW， 钢: 
t 等.我们需要调査三件事.首先是初始产综（如去年的投入)，记为 

^0 - (xi" ， 4 2 ) ，■- , X P). 


其次是…年后的产出 情况, 




最后是反映生产效率的方 阵禹二 (aS^), 它表示每生产一个单位的第 i 类产品 
需消耗个单位的第 j 类产乩 那么， 为产出 zP 个单位的第 i 类产品，需 

消耗个单位的第 j 类产品，这样，今年的产出〜共消耗了 f； 


个单位的第：/类产品+此即是去年投入的第 j 类产品的总和.于是得出 


写成向置 形式： 

!.,u 1 

邛二工1』]. 


矩阵 A t 反映出今年的生产效率，故称之为效率方阵，也称为结构方阵或消耗系 
数方阵。现在，我们考虑无消费的理想情形（带消费情形才有实际意义，但两者 
在数学上的处理类似，以后再讨论) f 即把产综仏全部投入再生产而经一年后产 
出^在此条件下，跟上面一样,我们有:^ =巧々.依此递推，得出 


*^0 ~ ' H 1 -^1 ■ 
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如假定4 = ^-1 = ... =山 = A (在短期内可视为生产率稳定)，则上式成为 
■Ti) 二 x Ti A n , n 0. 如乂可逆，则导出 


= x 0 A~ r \ n>a (M) 

换句话说,知道初始产综和效率方阵,我们便可预报第 n 年的产出,^这就是著 
名的投入产出法.可能许多读者都有所耳闻.早在 196 S 年，联合国统计司便将它 
列为国民经济核算的工具.我国从1974年便开始编制国民经济投入产出表. 


正特征向量法 


问题是：经济如何发展好？当然 ： 所谓“好”有不同的标准，在我国，曾长期 
存在一种看法，即“快”就是“好”.此刻，我们不评论此标准的合理性而暂且就 
事论事 ； 如何才能快？由 （ U ) 式可见，效率在短期内不变，即4不变.那么 ，问 
题成为如何选初始投入抑才 能使心 最大1如选好投入，即使某一产品不 
够，我们还可以进口加以补充.换言之、我们希望比值 ^ ] /^ ] 越大越好.但遠 
句话有 问题. 可能对某个这个比值很大,但对另一个 i 这个比值却很小，我 
们釆用最优化理论中的 极小极大化原 理作为标准：即在给定效益方阵4的前提 


下，找出利使之达到 


max 



min 



(}} 



W ， 

o 


这是个最稳妥的办法.在日常生活中.人们常取平均的办法：对 

于数据相差不多的情形，取平均是一个好办法.然而,若数据相大,取平均就 
会有很大的夫真.例如讲一个球队的运动员的 平均年 龄就很合适,但若谈一个托 
儿所的阿姨和婴儿的平均年龄便会闹笑话.因而这里不用平均而采用前一标准. 
这样做还有一种内在的原因，即期望各产品按照同一比例增长而避免失调,读者 
不难从随后的讨论中领悟出这一点. 

现在我们要问：依照上述标准，最好的增长速度是多少？为回答这个问题, 
先交待两个概念.称一个矩阵或向量非负（或正)，如果它的一切元素非负（或正 I 
前面的效益方阵七即是非负的.称非负矩阵4 = (%)不可约,如对于任何的 . 
和 义存在 小…使得 


a 。一 I 山 : At,, J > 0t 

定理 1*1 ( 华罗庚基本定理 （[33])). 设 4 可逆、非负不可约，以 u 表示其最大 
特征根 p = 所对应的左特征向董（必定可取为正的)- 



经济最优化的数学播型与马氏链 


(1) 如果取 如 = it (不计 正常数因子)，则 h n > 1. 此时有最快增 
长速度 〆 入 

(2) 若再设 A - 1 不是非负的：而且0 < 邱# 则必定存在 n 0 和 Jo 使得 
x ( J ： } < 0. 此时称经济走向崩溃. 

“ 崩溃”是指发展到某个年份， x n 必含零或负分量，即崩溃时间 

T inf(n > 1，存在 j 使; r }/) < 0} 

有限.此定理给出了最优的生产方案，即最好的（按比例）投入方案.如果 r 总是 
很大 ，那 么我们就不必在意.这是因为，比如说 t 我们只订五年计划，情况究竞如 
何,还是让我们先看看华罗庚先生的下述例子. 

例考虑工、农业两种 产品. 取 z ^ ( 25 14 Y 则 

100 \^40 12 } 

u= ^( V 2409 4 - 13), 20) & (4434397483,20). 

下表给出当&取为 u 的前几位有效数字时，对应的崩溃时间 T 的值. 


由此足以看出经济的敏感性，上述结论 （2) 甚妙:它 表明： 依据所具备的客观条 
件，经济有它自身的合理的发展速度.太快了不好,太慢了也不行.其实点破了 
也就很容易明白.我们可以在一夜之间办起无数的工厂,但没有足够的电力和交 
通，这些厂子能运转起来吗？我们可创办很多很多的大学 t 但没有教师，没有足 
够财力的支持,资料室是空的，实验仪器一样也没有,能算得上大学吗？ 

华罗庚基本定理的证明 

当然，华罗庚先生的主要贡献是定理的第二部分.如何看出这一结论，这需 
要相当的功夫，矩阵论方面的功夫.那么> 这跟马尔可夫链（简称为马氏链）有何 
关系？ 

对于马氏链，基本的量是转移概率矩阵（也称为随机矩阵）^ = 0^) 这种 
矩阵可由两个条件来刻画；一切元素非负> 0) 而每一行和为1 - !}■ 

我们有如下基本的极限性质. ' 




， fi ■ 
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定理 I . 2 .若尸为（有限）正方阵，则对于一切 t 存在板限 

lirn p^ ] =; ttj > 0 而且 厂 : L (1.-) 

rj— ►•: x. J 


此处 P n 二 (}^ y ) 表示 P 的"次幂， 

现在，我们暂且从这里 出发， 就正方阵选-■基本情形证明华罗庚基本 定理. 
华罗庚基本定理的证明（正方阵情形） 

a ) 首先,对于不町约非负方阵.有著名的 


Perron - Fmbenhis 定理不可约、非负方阵的最大特征根 p 为正，而且它所对 
应的左、右特征向董 u (行向量）和列向董）也都是正的， 


无妨设⑽=1 (归--化)，此定理容易从矩阵论的节籍中找到，因而不再给 
出证明. 

b ) 其次.由…二 P n P 易见.定理 1.2 中的 7 T 满足方程 7 T 二 / T 八进而 
7 T = 由此及定理1,2易证,满足方程 7 T = nP 的分布 7T 唯一现在、对于给 

定的不可约正方阵 A 二(叫), 命阳 =则（叫）为正随机矩阵■由 

P[^I 


E 




^>(4) 




u,v. 


及 


UV : 


1并应用定理 1.2, 得知这个随机矩阵有极限分布 A -■= 由数学归纳 


法易证 P ：； 


(n) 


J n K r 

ij 于是由定理1+2得出 


p ( A) n v 


lim - 


a 


(n) 

ij 


P ( A) n 


V ^ TYj/Vj Vi.Uj 


写成矩阵形式 



(■U) 


c ) 设 4 > 0,则必定有 A - 1 声 0. 无妨设 p ( A ) ^ 1且 〜 U 及:= 1.则 
由 Ai ; ^ V ^ A n v 二 1 ， n ； = A ^ n t \ 另一方面，由：知 


x n v 二 = 1 , 

子是若〜 > 0 对一切 n 成立 ，则 {^ n : ^ ^ 1} 为有界集，因而其闭包必有极限 
点.可抽子列彳使得 

—^某且 $” = 1. (1.4) 
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最后，由于 

: to = lirn a ： ov4 _n M nt = lim x nk A nk 

fe—*oo 

™ xvu (由 ( L 3) 和 (1.4)) 

= u ， （由 ( L 4}) 

故为保证> 0对 一 切 n 成立, j: g 必须取为? i. □ 

留意在此证明中，只需用到 （1.2) 便己足够.而条件 M > 0” 来自定理1,2 
中的假定> 0 ”. 我们将在下节放松这一条件.现在，我们回过头来证明定理 
1.2. 

_ 

定理的证明固定 J ， 命 

m n - M n = uiaJcp^ 5 . 

以下的证明分三步. 

1} M n i , 2) m n t 3) M n - m n ^ 0. 

先证 1) .记 5 = minpij ^ 取 k b ⑷使 则 

hj J 

^+i = m p J ] PikP ( ^ ] = max ^ p , k p^f 4 - pi”p ㈡ 

k L 

(max PikM n t p iio m n ^ rn^tx [(1 … pn 0 )M n + Piin^n ' 

1 L 」 1 

4 -、 M n — m n ) S . 

类似地可证 2 ): 

^ n - l-l ^ (饥 n 〜 

故由上述两条得出 3): 

0 ^ ~ tUjx ^ 饥 1)(1 — 25 ) n i —^ 0.[ 

事实上，最后一步还给出了； 4 n ) 收敛于 d 的一个收敛速度估计」 

随机模型 

在实际中，效率方阵 a 并非决定性的，总存在各种偶然性因素.例如农业 
生产依赖于气候.即使忘掉客观因素，对于大矩阵 A 特征值 p 也不可能精确 
算出，误差总是存在的.试问这些因素的影响如何？首先的猗测可能是无所谓. 
还是回到上述例子，在每一年，以随机矩阵 A n = (4 n ) ) 代替上述的4 =(叫)， 
其中 < 以概率2/3与决定性情形相同 t 即仍然取值％.但以1/6的 
概率分别取值 （1 土 0.01) a : 即以1/3的小概率作1%的小摄动.进一步假定诸 
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a ^ } (^i = 1,2, n . > 1) 相互独立，我们还 是从抑 =(44.： i 44. 20) 出发， 其第" 年 

崩溃的概率如 下表. 

n 1 2 \ 3 

概率丨 0 I ().09 [ ().65 

这表明在 三年内 崩溃的概率达 ( J +74, 与前面的决定性情形的 r 二8相比,相距甚 
远. 于是, 这个计划至多只能执行两年，就必须进行调整1以上讨论也表明，在经 
济学的研究中，如不考虑随机因素,就会造成很大的失真.这从-定角度上也解 
释了为什么人们普遍觉得投入产出法不好用 T 随机因素被排除，当然失真也就太 
大了.初学概率论的人，常以为概率论只是在人们说不清楚的问题上给出模糊的 
答案.其实.随机数学的运用，会使问题的解答比决定性的处理更精密而不是更 

to k^L 

事实上，在随机情形:我们有 

定理 1*3 (崩溃定理 ([6])). 在适当的条件下，对于任何的 : r 0 > 0,崩溃时间以 
概率1有限 ，茚 ] F -[ r - oo ] =a 

这里，我们不准备详细解释定理中的“适当的条件' 只是 指出， 此定理的证 
明远非平凡.需要用到随机矩阵乘积的极限理论这一当今概率论十分活跃的发 
展方向，与独立随机变量和的极限理论相比、此论题是如此年轻,令人难以置信. 
欲知详情，请参考 [2 S 1 及文中所列文献1更新些，作为随机矩阵理论和算子代数 
的交叉渗透,十多年来形成了自由概率 （free probability ) 的新的学科分支.更多 
的信息可参见丨11,第10章], 

注1义华罗庚先生最初研究此问题时主要是针对当时的计划经济而言的.但他 
同时也指出此模型对市场经济也是适用的,只不过产量指标&需换成价值指标. 
详言之，以 P , 表示第 I 类产品的市场价格，并命 r 为以 vjp , 为元素的对角矩 
阵(回忆（以是的右特征向量 ). 则只需作如下变换即可 

u —— ^ uV, 

可见数学模型保持不变,但需注意在市场经济中，随机性还要大些. 

注 1.5. 本节所讨论的无消费模型当然是理想化的，更切合实际的是带消费模型. 
假定把每种产品#>的增产部分 拿出心 1 e (0,1) 的比例用于消费。那么，一年 
后能用于再生产的产综（决定性情形）为 


yi = a: 0 + (xi - x 0 ) (/ -0) = -0) + ©h 


(1,5) 
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此处如二邱 . e 是以 { 0 ^} 为元素的对角矩阵了简记 5 = a -^ i - 0) + o , 仿照 
本节幵头所证1得出第〃年可用于再生产的产综为 

y?j — yu ^ n 3 n . 

可见 i 从数学 上讲, 我们只是用 以代替 .4_ A 而已 I 然而，带消费的经济模型更容 
易稳定 I 这与实际相符([12|). 

注 1 A 对于带消费的经济模型 : 应当有相应的崩溃定理1但目前我们仅有部分解 
答 ((121)^ 另一方面，研究崩溃定理并非最终目的，人们期望有某种最优的控制理 
论,但此方向的研究目前尚属空白.应当说. H 前经济数学的研究与实践依然有 
相当大的距离^经济毕竟是一个极其庞大、极其复杂的系统.也是一个有待开 m 
的大领域. 

注^ 正特征向量法己成为互联网搜索引擎的主要数学工具.在网上捜索时，我 
们输入若干关键词，搜索引擎先搜索与这些关键词相关的网页，然后将网页排序 
输出.排序的规则是网页的级别齒高至低.那么，这个级别如何定？依据是网页之 
间的链接情况 (: 可适当加权 V 基于不同的想法，可以选用不同（主要有三种）的 
网贞之 间的链接矩阵（相当于经济模型中的结构矩阵).然后网页的级别就取为 
这个矩阵的正特征向量.显然，这方面的研究有着很大的应用价值和商业价值 U 
只要在 

www* google, com 

上输入关键词 "search engine . pagerank ?, , 便可找到诸多 文献. 参见01， 42:. 

注 〖. S . 我们以经济模型为例,说明马氏链的应用了这自然是挂一漏万+在此模型 
中，因为客观上存在着随机性，我们被迫要使用随机数学.这是被动的.但新近出 
现了反面，即在客观上并不存在随机性的领域,人们主动地使用随机数学 + 典型 
的例子是随机算法，而其中的重要武器之一就是马氏链+例如参见丨 55 j . 
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上节已看到转移概率矩阵的极限性质^ ^ 的重要作用，并己就 
“p > < r 的特殊情形证之. 本 节的目的是处 Sii 为一般的情形.我们指出：虽然 
此性质是纯分析的、但一般情形的证明却需要概率方法，在本节中，我们将看到 
概率直觉的重要性1 

马氏性 

设九=匕^..}为有限集或可 列集. 


■ 
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定义 i ,9, 称 （ x n )^ 0 为定义在概率空间 （ afj ) 上、取值于空间 e 中的马 
氏链，如下述马氏性成立：对一切 n 有 

P [ X n = = in - l ] =寧 n - . ij - 

倘若左边的条件概率有 定义. 此时称 p ( n - U ' n ， j ) : - P [ X T! 二为在 
时刻 ^ - 1 处于 u 在时刻 n 转移到 J 的转移槪率 函数； 若它与 /i 无关.则记作 
Pij ： 并称之 为齐次的或时齐的. 

马氏性有如下等价形式（读者无妨自证之) ：固定 “现在 = L 则对于 
任意的 ; ‘过去” 4 G : n < rn ) (rfl { X n : < m } 所生成的。代数）和将来 

B t ( y { X n : n > m ), 都有 

P [ AS ^ m =^ l = P [4| X m = 调 Blh ]. 

即“过去”和 “将来 ，’关于“现在”条件独立，若把条件 M 去掉.便成为独 
立而不只是条件独立+这样，“马氏性”乃最接近于“独立性” 的-种 ”相关性' 
自此以后，我们只限于齐次马氏链，由定义 1.9 得出转移概率矩阵： 

P = fej)> P^j > ^ 1 ■ 

它表示齐次马氏链的一步转移概率.进而，由归纳法和马氏性易证 . 的〃次幂 
= ( O 乃是龀链的 II 步转移概 率：; f 4 n) = IP | X T , = . ? | X 0 =小特别地 ■ 尸 11 :厂 

即 />『 =¥ 称 i 可达 h 如果存在 ， in 使得 PiiiPui 2 ' 1 ' Pii , i ， i ； PK , J > 
或等价地,存在 7 i 使得 pf > G . 如果任意的 i 可达任意的 t 则概率矩阵（或马 
氏链）称为不 可约. 

有了矩阵 P 的概率解释之后，我们便可引进各种随机变量或概率貴. 

常返性与正常返性 

定义如下两个量. 

首次回访时间： t / = inf {^ ^ I : X , - Jl 3 € E , 当此集合为空集时 ： 则定 
义7/ = + oc . [ r / = 0 C ] 的含义指永不回到 J . 这里使用上标 “ r 是为区别于 
另一随机时间= M{n ^ 0 : X n = j }， 它 称为首达时.自此 以后，我们常把 
E \；] X 0 二 i ] 和 P [ | Jt 0 - i ] 分别简写 成仏和 定义 

二 = n ] = Pil^n = j \ X ?n ^ ]A ^ m < n ], 

它表示自 f 出发,恰巧在第 n 步首次回访 j 的概率.命…它表示自 
i 出发、经有限多步终于回到 j 的概率.留意 Wi ( r ； 
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再定义平均回访时间 E 


m 


E , r , 




oc 


若知< 1 


定义 1.10, 称 j 常返 ： 如 


: 否则称为非常返或皙留.称 j 正常返，如 


E ，/ < 00;如 j 常返但非正常返，则称它为零常返.最后 t 称链常返（零常返、 
正常 返)： 如它的一切状态如此， 

从应用的角度来看 T 三 种常返性中，正常返 是最重 要的.好比每一位母亲都 
盼望她的游子能够（在有限时间内）常常回来探望，然而，从数学上讲,更为 
基本，因为知和都可经由它表出. ^ 

粗略地讲，为得到非平凡极限 \ un ^ ] > 0,充要条件是 P (非周期）正常 

返.而在非常返或零常返情形 ， Jun p\f = 0. 这便是本节开头所提问题的概率 
解答,也是本节的主要目标.为送需一段路程才能完成. 

下面是关于常返性的一条判别准则+ 

定理 1.11 .状态 i 常返当且仅当 g ^ = oc .在 i 非常返时 .f # = (1 _ 

,、 n fl=0 n=0 U 


解 


我们先给出此定理的证明以资熟悉上述基本概念 + 证明的关键在于如下分 


引理 1 A 2. 对于一切和 n ) l ， 我们有 


^ = I ： 魏，) 


(1 叫 


m 


证明此证明用的是 首次进 入法、即依照首次进入状态 j 的时刻进行分解（即下 
面的第二个等式). 


pf = ^i{X n = ^ P^ 7 / = WjX 


I m 


[ 『屯十 = m ] P [ X n = j \ X Q = d / j ，// < m，X 


p 

J 
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n 




(由马氏性) 


m 


n 


E 



㈣ 釘 ( 卩， m ) 

i ^jj 


n ^ 1. 


□ 


定理 l . ii 的证明留意 


N N 

) 


(由⑽ )) 


i 


JV 


E 4 T } E ^ 


N N 

( n ^ m ) _ 

d 

n 

n=m 


N^m 


(1.7) 


E/TE 


P 


(n) 

I I 

JJ 


=0 


取 


并令# 


—► 00 


得出 


oo oo / oo 

d /. ^ f i , 




fa Y , ^ ^ 



E 



a 


这便得出定理的后一项断言及前一项断言的必 要性 ： f pl t n) <^ o=^/^<L 

n=0 

然而,该断言的充分性（即 f 却不能直接由此式得到，因 

为这里出现了 oo / oo 问题. i 3 t , 引进母 函数： 

☆⑷ =£ - f ；， 4T) t se(0A). 

n =^0 r =±1 

(注意 ^ Pu ] < l , 此二函数项级数在 ( o , i ) 上是收敛的 .） 则依照 （ L 7) 
的证明方法，由 （1.6) 可得出 

P l3 (s) - 5 i： j = (1-^) 

这样 F “⑷=1 — Pu(syK 由此及 = limFuis ), Ep !；^ BmP “⑷立得所 

Ml «U 

需断言. 口 

上述 （ L 8) 式还掲示了极限 Hmp ^ 与概率之间的内茌关系： 

n 一 oo 


JLiin ^ p ^ = Hm(l - s ) Pa ($) (Abel 定理，易证) 


S 


(由 (L8)) 


(若设 i 常返 > 


Um ■=：-— 

, T 1 昂⑷ 

w . 
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h 

_ 

此关系在直观上并非显然，但却是本节概率分析的导源. 

关于常返性，有如下简单性质. 、 

推论 1， U . 对于不可约链，一切状态同时常返或非常返， 

证明 取… m 使;^ 〕 > 0,力… > 0,那么，由> P ^ P ^ 及定理 
L 11 立知，若 i 常返，则 j 必定常返， □ 

推论 1.14 ■设） 常返.若 j 可达 fc , 则心 = 1. 

证明定义 

fi j? = ^A x n = k,x m ^ j,0 <m <n] r (1,9) 

它表示自 j 出发、中途不经过 j 而在第 n 步到达 Jfc 的概率•因为 j 可达 fc T 必存 
在 u 使得々 > 0. 若心< i , 则从 j 出发,永不回到 j 的概率 P ^ [ r + - oo ] > 
^ ; d - Aj) > 0,这与 j 的常返性相悖. □ 

下面是我们的第一条极限定理. 

定理 1. H 设 j 非常返，则对于一切我们有 lim p ^ = 0. 

n—^oo J 

证明当 i = J 时，此结论来自定理 Ul . 当 I 一 j 时，使用 （1.6) 及控制收敛定 
理-这是因为 

心 ) = t / n m ) = f : ^^; r % 柯 

m=l m=l 

cc 

且当找 — DO 时 1 > P ^ m ) I [m ^ n] 0. □ 

m 二 1 

周期性 

前面已定义了不可约的概念.留心对于一 般的尼 可能含有若干个不可约子 
集1 然而，我们总可以把此链限于每一个不可约子集 （依 然是马 氏链） 而逐个处 
理（详 细讨论留到下节).因而在这里我们着重处理一个不可约类. 

我们的目标是研究极但目前可能出现复杂 情况. 例如考虑非 

负整数集上的马 氏链： p M+l > 0, p M _2 > 0而其他的沾 J = 0 (向前一步 T 退后两 
步!) . 那么，从 i 出发，至少要走三步才能回到 i 即存在子列 （〜） 使得 p ^ fe) =0. 
为排除这一情况,我们引入如下概念， ? 

定义1.1&假设集合 { n :；4 n ) >0} 非空.命木为 {n : > 0} 的最大公约教， 

并称之为状态 i 的用期 • 当札 =1时，称状态 i 非 周期. 更进一步，称链非周期， 
如它的一切状态非周期.非周期的正常返链称为遍历. 
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以后我们将证明非周期性的如下刻画（命题 1.28)： 状态 i 非周期，当且仅当 

存在 W 使当 O W 时 ， #) > ()■ 

在矩阵论里(有限情形)， “ 不可约”称为 “不可 分拆”（或“强连通”);而把 •非 
周期”称为 “强 不可分拆”.相应的矩阵也称为“原方阵' 

极限定理 


若已知存在极限 lim =以则由 P n+1 = P n PA Faton 引理得 

n—M 3 C J 

^Tj > 小 ( i10 ) 

_ 

I 

从而 （i >) ^ = I >. 可见 (i io ) 式中的等号 成立. 故得出方 

• II • 

J t J ^ 

程 7^ = X ) ^iPij i 或 TT = I 尸.进一步， 

_ 

t 

7T — 7rP n , li ^ 0. (I ll) 

此式表明，若初分布 P [ X 0 = i ] - 则此链在任何时刻 n 的分布都 一样； P % 二 
i ] 二 冗卜对于不可约链 , 如有某个％ > 0,则一切~ > 0. 事实上 ， 因存在 n 使 
p ^ ] > 0,从而由 ( L 11) 知 h > TT . p ^ > 0. 故无妨设（其实随后的定理 1.17 将 
证明 ） 已巧= 1. 基于以上 原因： 我们把 （ ttO 命名为链 （ X „) 或 P 的平稳分布- 

与平稳^布紧密相连的概念是不变测度= (A : i e 幻称为 P 的不变测度:如 
果()<〜<00且 = "R 

下面是离散时间马氏链的中心结果.其证明包含了诸多的概率思想和技巧， 

I 

定理1,17,设尸不可约.则下述断言等价： 

(1) P 正常返， 

(2) P 有平穗分布 7 T . 进而，平稳分布唯 一 ：对于一 切么％ =爪7/，此处”~ = 

Et . 

若 P 还是非周期的，则 （1) 和（ 2 )又都分别等价于 

(3) tim pj n) = ttj > 0. 

这个定理告诉我们在（非周期）正常返情形， pf 的极限为正（也是之所以 
称为正常返和遍历的原因).另一方面，定理 1.15 已表明在非常返情形，此极限 
为零.佘下的只是零常返情形. 

定理 1.18, 设 P 不可约且零常返,则对于一切 hjeE , lim £ n) = 0 + 

n 一 oo 4 

定理 U 7 的证明 i ) 先证 （1)0(2) - 
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命。厂 曼喵'这里 由 （1.9) 定义. 

?«!.:• I 

a} 往证：如 j 常返 : 则 = m n (= •EjI 7 '/])- 

Z 

这只需使用 


r i 

.."■ IF/X m t j . 0 < m < 叫 = Pjr+ ^ 7i ； 

.:X ； 

- 1 - hi + Z /)；° (留意 ^ 1 - h ) 



W 对求和 即可， 

W 再证：若 j 常返，固定义则 ㈧ 二 y ' i e E ) 为不变测度. 
山定义知， 






e . r ) 




知 垆 j 


故满足方程 

叫二 IHPfci + Pji = Y^kPki- (! 12 ) 

最后…步用到常返性：内 = % = 1. 进而有 " =由不可约性知，可 
取"使> ( X 于是 

1 ' - E 卿 S) MpS? - 

k 


这表明叫 S 1/ p - j J < og , i e E . 

c ) 试证： 对于不可约常返链,若不计常数因子，则不变测度唯一. 

假设 P 无妨设（以非零（即不全为零)，则由 y 二 rP " 及不可约性 
知，切 h > 0. 今釆用一种对偶技术 T 即命心= AP 少 u 则易证戶 =( 如）是 
一转移概率矩阵（称为 P 的对偶)，而且也是不可约的.此 外，; ^； 0 = S ^ 

因而£ =⑺■即戶也常返.另一方面,依照“在时刻 n 之前最后 
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一 次汸问1的时刻”进行分解.得出 


[U 

Pa 


[ P ， iX n - j , X m = LX i ^ Lm <. l<n 


m=0 


• _ _ _ 

[ 二种狀 n 二 jJdijuckmX 


{[. l；}j 


m=0 


m-ii 



(rn) m) 

U 、 l) 


由 (1.13) 并使用母函数方法得出: P ^ s ]-6 ( ^ P ^ E tj { s ) { E t ： f is ) ,= [ S ^^ ] ) 


71 - 


从而由 b ) 知 limPijis )/!^^) = liini 1 ^^) 

a]l a ] \ 


e r! < oc . 另一方面，凼 （ U ) 及推 


论 1.14 知， limP ^/ P ^ s ) r , f, f ., I . 把它应用于 P 得出把 
综合这两件 3 事实并使用 J 5 的定义得到 




%: 




故*>士 而与〗 无关. 


地- 


d ) 最后 证明： 正常返 O 存在平稳分布 . 

设链正常返，则由 a ) 和 b ) 知， f^-./rnjj \ i ^ E ) 是一平稳分布.特别 


% = fh/ n hj 


- mg . f | 则 jf (■) 知，短 


式子实际上对 M ,/ 成立. 这 liH 得 


定理的第⑺部分的末项断 I 反之 I 设 P 有平稳分布: r . 那么，由：：二定 
理及控制收敛定理知，此链不可能非常返.然后由 h ) 和 r ) 知， P 有唯_ - 不 
变测度.再由 a ) 和 b ) 知 I 1再用一次 c 1 )， 知后一式子对一切 V 成立. 


ii ) 次证 （2) 


(3). 本定理之前己证 （3) 


存在平稳 分布， 因而只需再 


证⑺ = M 3). 由此 推出： （3) 中所给的极限 7 T 二 （；0必定是一概率分布，事实 
上，若⑶成立，则存在平稳分布/ =但下面所证％2) n (: ir 告诉我们 




7 Ty 由此及所设 （3) 知， 7 T 二 7 T '. 


a ) 取相互独立的两个马氏链 （ x n )„ ㈣ 和 ( y n ) rt>u . 它们具有相同的转移概 
率 P ， 但初始分布不同.固定 h 


P [ X 0 


Plh = j ] 二巧， 


j ^ 


则由独立性知 1 := ( X n , y n ) 具有转移概率 p ( u) 圳：二 p ik p ；}{ , 分别选心 


Tlri 


使 > o , P ^- }y] > 0. 由于非周期性：可选叫 


和 


当 ri > n 0 时， p ^ p^f 


> a 


• a 由于非周期性，可选 n 0 =叫 ( M ) 

于是，当 n > n u 时，我们有 


使 


㈣ p ^ +n ) > 0,可见％)也不可约非周期■易见 （ A ) 有平 
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稳分布 (7 T (- i . : j ) = 7 T ,7 T i3 ). 命 r = iuf {” ^ 0 : 那么由上面 i ) 中已证的 

( i ) 知,平稳 ^ 正常返4常返4 P[T < oo | = L (其实 s 使用 i ) 中之 d ) 中所 
证的“不可约平稳链必定常返”便已足够 
b ) 另一方面，对于任一 1我们有 

n n 

:- j,r^n\=^2 - J, T = m] = ^2^\ z n = 0，^), r = m 

rn =0 m =0 k 

n 

^ XU] P ( T = 爪 ] 1 HA = { j , k)\r - m 

m=0 k 
n 

= ^ P f T = = (^ k )\ Zi ^( Li ) J ,< m , Z m ^{ i , i )\ 

m~0 k 
n 

二 n， 二 mjp[z u = ( j , k )\ z m =( i ^] (由马氏性） 

m^=0 k 

m=0 k 

n 

=^ P[r = m\ ■ 

m=0 

同样地. 

n 

^[Yn = j , r ^ n ] - ^2 ^! r - m \ Pij ~ m) ^ 

m=0 

因此 

\^ ) - 7 ： ] \ = \ nX n = j ]- F [ Y n ^ j \\ 

=|P[X n = j ，T > n]~ P[y n = j } r> 7i] 

^ P[r > n] 0, n —► oc. 

最后 一 步用到 0 < 义 b ^ c |a — b | < c . □ 

此定理的证明把两个马氏链放到同一概率空间来考察.所得到的 （Z n ) 称 
为和（V；)的一个親合.这是一种最简单的耦合（独立耦合 ). 当然还有更为 
重要的非独立耦合.耦合方法是现代概率论的最重要的发展之 一 . 关于耦合的许 
多迷人的故事,可参考[叫- 

对于不可约链 s 由上面的证明 i ) 中之 a )-- c ) 知，若它有平稳分布，则它的一 
切状态正常返.反之，若有一状态正常返，则由上述证明知必定存在平稳分布,进 
而一切状态正常返.因而得出如下结论（类似于推论〗,]3 

推论 Llfl . 对于不可约链，它的一切状态或全为正常返或全为零常返. 
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定理 US 的证明 a ) 固定 i 枯 依然使用上面的独立耦合，只是因为现在并光 
预先给定的平稳分布1改取 Pf 凡== 1. 如果 （仏） 非常返、则由定理 un 
知， 


所述断言己真. 


( P?)) 2 



⑻ 


0 - 


h ) 今设 （ Zd 零常返,依上一定理址明的第二部分，可证 


lim (K \/k G E. (1.14) 

We E ,{ p ^} n > l 有界，从而存在收敛的子列.利用对角线程序、可抽 子列卜 J 

使得叫 = lim E . 再由 (1,14), 我们也有 

m—^oo 


Vk = lim p^ T，J , G 

一 OO J 

无妨设 （ Vk ) 不全为零 7 否则断言己真.显然有 Em L M —方面，由控制收效 

k 

定理及 P Mti+1 - 尸 知， 


lim /，^:『 N+ I ) — Vfr e E , 

m—oc J 

再由 + i ^ P % P 及 Fatou 引理导出 


Vh > ^ Vipik, vt e E, 

} 

定理 U 7 之前已用过的证法表明，此式的等号必须成立.这样，如有必要，对 
作归一化处理，得知 r 有平稳分布.由定理 U 7, 此链必定正常返而巧所设矛盾. 

n 

容易看出，不可约有限链必定是常返的，进而：由定理] .17 的证明及％, 
知，此时链必定正常返.换言之，有限马氏链不可能零常返、留心若 r 哲周 

_ 4则 M 便成为非周期的.因而周期情形并无本质困难。这样，我们已完全证 
明了本章第一节中的华罗庚基本定理而无需假设尸> a 

一般地讲、上面关于常返性和遍历性的定义和判别准则都不易验证.更为有 
效的判别准则乃是本章第四节的主题. 


注 1.20. 定理 1.11 还有另一证法.不用母函数而改用有限和逼近.即使用卜述比 
值极限定理,它本身有独立的价值. 


引理 1.21. 对于一切我们有 
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定理 1.11 的另一证法事实上，由； = 心及上式知 


lim 1-1 


_ 



{n) 




由此导出定理 L 11 的结论. □ 

引理 1.21 的证明只需在下述初等分析引理中取 


(in = P '^\ 


rt ^ l , b 0 




并使用 ( L 7). 




引理 1.22 .设（知：为不全为零的非负数列，满足 


lim a n / } a 


a 


则对于每-实数列只要6:= lim ^存在 （ 可以为土〜：)，就有 


lim 'N 、 " 

> ― irV 


p ^ 


0 


证明由所设条件，对于每 iv > i : 有 


lim 


E - 

n-N 十 1 


■ v 

E a 


am ) 


0 


a ) 先设叫 < oo .任给 £ > 0, 取； V = N ( e ) 使得当 n 》 iV 时，|心 - h \ ^ ^ 
于是存在 B < oc 使得|、 - b \^ B 对于一切 n 成立1进而 

I n I n — N n 


n —tti — h)\^e ^a m + B Y, 
m-0 m=0 m =n - A r H-1 


两边同除以 E 并使用 （ L 15) 得出 

m=0 


lim V" a m b n . 

i ^ rv-i 




b 


m =0 


b ) 对 | b | = oo , 无妨设 b — +0 O , 则对于一切 A / > 0,存在 iV = N ( M ) 使得 


当 TlgiV 时，心于是由 


n-N 


〉: ^ ^ 〉: a m 


0 


mm 


n 

i! 少） [a. 

m = n - N+l 
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易得所需 结论， □ 

注 1.2:( 类似地，定理 U 7 第一 部分证明 r ) 的后半段，也可不用母函数.仿引 
理1,21的证法，由引理 1.22 及定理 U 7 第一部分证明得出 

nrtO ’ n=0 

由此及引理 i . 1 4 和引理〗 .21 (用于 F ) 得出 



故 / A : /f M 二 A ■，而 与 i 无关. 

_ 

注 1.24. 在这里：定理 1.17 和定理 1.18 的证明用的是较新些的耦合方法，因而 
更具有概率直观，它们的早先的证明是较为分析的， 


§1.3 —般情形下的极限定理 

对于不可约、非周期的马氏链、我们己有完整的极限定理.本节的 R 的是将 
这些成果拓广到一般情形.为此 T 需要对状态空间更细致地分类. 

状态的分类及相空间的分解 

定义 1.25. 绐定 P = (~)称；直达 J (笋0,如叫 > 0;记作^ — 义称1可 

达 j ( V - 0. 如存在小 im 使得 i 4 h 4 h — i ; 记作 j . 

如 h J 且 j - M :， 则称 i 和 j 互亂称状态 i 是本质的 * 如 i 〜 j 时必有 j 
否则称为非本质的. 

瓦通关系显然是可递的，这样，可依此关系对状态进行分类.把念 i 的等价 
类记作 qo : 

C ( i ) ^ { i } U {j / i : i 和 j 互通 }■ 

ru ) 中的状态 t 如多于一个 T 必定互通.然而依然可能存在_ r ( o 使得 2… j 
但 j ^即；未必是本质的 .若丨 是本质的,只要1… j , j 也必定是本质的.此 
时 c ⑴构成£的一个不可约闭 子集： 

V pjk = ^ j e c(0, 

keC ( i } 

并且是 最小闭子集，即不存在 Cp ) 的闭的真子集，由推论 L 14 知、每一常返态 
必定是本质的，因而所对应的 C (0 必是闭的.一种特殊倩况是如1，则依定 
义, i 是本质的且 C 0) = { 小此时称；为吸收态. 


一 鲅情形下的极限定理 

若 h : > <n 为空集 ， 则状态;:非本质.这样 ， 对于本质状态、我们总叼 

以定义状态; 的 周期： 

<二集合 {〃. ： pt > w 的最大公因子， 

关于周期的…个基本结果是 

定理 L 26 .如? 和 j 互通 ， 则 < 二< 

这样对于一个不可约闭集、我们可以使用 •个 公共的周期 rf. 我们有如下 
的重要性质， 

命题 I - 27 ,设 C 为不可约闭集，其周期为</>1,那么，对于任给的 U 。 C . 若 
有以… :> () 及> U :则〜…可被 d 整除， 

根据此定理、链在不可约闭集 C 中的运动有一半决定性的周期规律.即我 
们可将 C 分成V个不交集： 

d 

C =冗 G m , 

rvisssl 

从任一 G m 中的状态出发，下一步转移必定落入 G m+1(mod ^ (详言之_可先固 
定--个状态 h 使用命题 L27、 依照每一步所能到达的状态作出一个分解 ：然后 
再证明所得的分解与预先固定的状 态/无 关）.这样 5 若把步转移视为新链的 

一步转移 ； 则此链就变成非周期的了，然而，对于这个新链而言，原来的 （V m 就 
变成闭子集了.即新链可分为(/个不可约子链 1 

上面的讨论表明：对于周期为 d 的不可约闭集 C : 它的每一个状态 （ 都满足 

/ >!n!) E > 0* 此性质可部分地推广为 

命睡 1.28. 设状态7:的周期为 A 則存在凡使当 n ；? / V 时， p { ^ d) > (I 

综合以上讨论及推论 U3 和推论 1.1A 可将任一马氏链的相空间作如下分 
解、它同时也描绘了系统（马氏链）运动的整体图像. 

相空间的分解及系统运动的素描 

(1) 若把每一不可约闭集称为一个类，则常返性，零常返性、正常返性、遍历 
性和周期性都是类 性质， 即同类中每一状态所共有的特征. 

(2) 由零常返类 {C7 t }、 遍历类 （C)} 和正常返类 {CJ 的并集构成常返集 C 
从 C 中某一类 G 中的状态出发 T 系统只在该类 G 中运动.在周期情形, 
系统具有半决定性的运动规律. 

(3) 余下的状态的全体构成非常返集 D. 从 D 的状态出发 ： 系统可能永远在 
D 内 运动: 也可能落入 C 中的某一常返类而后永远在该类内运动. 
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极限定理的陈述 

现在、我们可以详细陈述的极限性质.回顾 mb 


- I 泞：当 j 常返时 


ttj = m 


jj 


定理 1.29. 


⑴如:?非常返，则对于一切 i G K 有 Unip ^ zO , 

n—^oc J 

(2) 如 j 常返,设它的周期为 d = 心.则对于一切 i 和1 Sr 有 


{nd 


+r) 


_ _ 

E / 

m =0 


U 


(U6) 


特别地，设 i 为本质状态■如? ¥ C ( j ), 则对 于一切 n > 1， ； p $ = 0.如 
tG C ( 几则 C ( j ) = C (0- 可设 j 属于 C ⑷ 分解中的第 r 个子集 .那么 


p[f = °： 


如77 〆 md + r ; 


lii ” 


( nd - hr ) 


mjj 


(1,17) 

(Ufi) 


此定理之所以较复杂，根本原因在于周期性.若 j 非周期，则由此定理立即 


导出 


推论 1.30. 若 J 非周期，则对于一切 ter 有 


m 


_ _ 
jj 


(U9) 


当非常返时，约定灯化= 0 C (或 TTj = 0). 

如果把关于 n 的逐点极限改为平均极限,则结果也十分简洁 

定理1,31, 对于一切 r jeS 有 


lim - 

^oo n 


r 

E 



( m ) 


fij^j 


( 1 . 20 ) 


最后，留意对任意的平稳分布 Tt , 总有 7 T = 进而 7 T = 

利用定理 l . ii ， 定理1.17,定理 i.is 和定理1.31，容易证明（不妨自证 £) ](n 下的 

平稳分布的结构定理. 

定理 I . 32 *以 { C ft } 表示正常返不可约闭集的全体 ，命丑 =£\( u <^) ■则 p 


的每一平稳分布形如 


% 


CK 

_ 

入 Ot 
mu 


如 i^H 

左以如邮 
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2:! ， 


其中彳满足 = 1 - 

a 

结果的证明 

本节的剩下部分用于证明上述诸结论.我们将证明主要定理 L29 和定理 
0】、然后再回去诋明之前的结论.我们将看到，有了上一节的基本定理之后，这 
里的主要定理的证明并不困难. 

定理 1.29 的证明 

4结论⑴乃是定理 1 U . 以下假设 j 常返.当4 C(j ) 且 i 为本质状态 
时、显然有< 1) =0对一切成立.否则由且 i 本质导出因 

这导致矛盾. 
b} 使用首次进入法得出 

rr . J —7* n 

p ^ r] = e n ) 二 e 4 广冗一 ㈣ (1-si) 

i'=0 m=0 

后 1 等号用到 J 的周 期性： 当且仅当 n 时、 Jjg / a 另一方面 3 将定理 
1-17 用 于以户 =为转移矩阵的新链中含状态 j 的不可约闭集（它是非周期 
的)，得出 jirri^p^ 5 = l/?7i 7r 由于 mjj 二 故有 

lim p^. d) = d/mjj. (1.22) 

n—^oc JJ 

综合 （1.21) 和 (1.22) 便得出 (L16). 

c ) 如本质状态 i G (7 ⑴而 j 属于 C ⑴分解式中的第 r 个子集，则显 
然/^ 1 = D 对一切 n / + r 成立，此即是 ( L 17), 当然更有/对一切 

以: W + r 成立■于是 g 这样 JUS) 来自 （1,16) 式 

m=0 

及推论 U4. □ 

定理 1.W 的证明当 j 非常返时，由 \ hW ^ } = 0及巧= 0立知结论成立.当 
,；常返时 s 由 （1+16) 知： ^ 

rn =0 

这样，所述结论可由下述引理 导出： 

m=l 1 rri—0 

引理 L 33. 设有正整数 d 和数列 W : n > l } 满足 

lim ^ Tid+r = 1 ^ r ^ 
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Urn - 

n —kx Jl 



E 

m=l 


= 



证明因为数列的平均极限必重合于自身的极限 ，我们 有 


1 71 

lini — 〉 — b r . 
记 乂 = aupa ^, n — md + s , l ^ s ^ d , M 


n 


d 


n 




d 


5>. 


V 


V 








md+J 



v t±rriciH -1 




v 



i ^ 

+ 泫 




令 u 叫则 m 〜 00 且 md/rt 1. 由此及前一式子得出所述 结论， □ 

现在我们回过头来证明本节开头所述的关于周期性的若干初等性质、 

定理 UG 的证 明设？ 4 m ) > > 0 ,则 piT ^ n) > > 0 ，于楚 

灿川+叫同理叫 (m + W ■若^ > h 则 P ; r n+ ') > P ;? > 0』故 
dj}{m + n + f ：}. 这两个事实表明 4 K ， 于是 * 问.由 i 和 j 的对称性知故 
必定有4 =4. □ 

命题 L 27 的证明因为 j … i , 存在 m 使> th 这样， 

pir ni) ^ p&vr) > 0 ， pir +n2} ^ < 旧 } > 丄 

这表明木 K 川+几 1) 且 dil(m +几2).故必有木 |(m — 打 2). □ 

命題 1.28 的证明要点是使用初等数论的如下结果:若正整数力、以，有 
最大公因子4则存在正整数凡使当 n > W 时有非负整数…使得 

m 

nd ^ Y, c k s k ， 

kt { 

今选礼也…，〜使得> 0且它们有最$公因子 a 由上述结论，存 
在 义使当 nN 时，有非负整数 { q } 使得 nd 二 f 因而 


#)^)广 + . 吣个 >0. □ 


注 1.34. 定理 1.29 和定理 1.31 依然可作进一步的改进.设 C 是任一常返的不 
可约闭集,它有分解彳(^0 =1 ，命 

f(M ， G v ) = P , [存在 n 三 r (mod d) 使得 X „ e 

f ( i , C ) = n \ 存在 n 使得忍 eCj , 
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那么， ( L 16) 可换成 

lim p { ^ r) = i/(i ， r 凡 )，如 jeG v - (L23) 

Tt ~ ^oc TTlj j 

而 ( L 20) 可换成 

lim - V pS 7 } = f ( i ' C )7^ 如 j e C \ (1.24) 

n—»oo 71 ^ J 

其加强之处在于系数只依赖于所在的类而不是具体的状态.这些结论可由下述 
两条推出： 

(1) 对于任一 ^和 1 < K d , 我们有 f f ^ r \ 

m^O 

(2) 对于任一 jec , 我们有 /( i ， c ) = /+ 

证明此处只证明断言⑴，断言 （2) 的证明类似.简记缺卜 f .首 
先，显然有 f tJ { r ) ^ G v ). 反之 ， 我们有 

CJO 

fij{r) > [ [ 十 r / 卜 O^v < n\fkj{d), 

n = o^eGu 

留心当 k } j & G v = = 由此导出反向不 等式. 口 

§1.4 若干判别准则最小非负解 

判别准则 

本节是第二节的继续.我们将给出一些不等式型判别准则.首先是关于常返 
性 + 

定理 1.35. 设户=(巧彡）不可约，1/为£?的非空有限子集.则此链常返当且仅 
当存在有隈的加）满足 

{ E P^Vj < Vh 

㈣ （ 1,25) 

lim y t = oo, 

t—>00 

最后的极限是把五视为 Z + = {0,1,2,-^} 来 处理. 但这并不影响一般性， 

其次,用同样的方法来讨论遍历性以及收敛速度.最典型的速度是几何式收 
敛 速度. 
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定理 1-36 .设尸 不可约、非周期， I {为 E 的有限子集+则此链正常返（遍历) 
当且仅当不等式 


s H 

j 


(1-26) 


有有限非负解. 


典型的用法是使用多项式函数 ! A = c<l +，). 

称链几何 遍历， 如存在/3 < 1使得对一切 i t j ， h 有 

㉟ )-小〜俨 ■ 

定理 1*37* 设 P 和柯 同上.则此链几何遍历当且仅当对某^>0,不等式 


Hvim ^Vii 1 - G - 1 

r 

J 

E < 00 

j 


车 a ' 


(1.27) 


有有限非负解. 


这些结果的漂亮之处 在于： 条件均由 p = 决定+它们的证明需要使用 
下一部分所介绍的数学工具. 

最小非负解理论 

在研究马氏链时,常常需要研究无穷线性方程组.因为非有限维，线性代数 
方法无效，需要新的工具 . 20世纪70年代，我国数学家侯振挺发展了最小非负 
解理论这一数学工具.参考降 I 卜这里的陈述取自问+ 

我们常联系于两类方程 

而 = ^CikTk + bi , i € E \ 

k£E 

Xi(t) = ^ / Cik { s ) x k { s}ds + bi ( t ), i e o 0， 

此处以，~衾 0. 

下面介绍一种抽象的形式.使用如下一些记号. 

E : 任意非空集， 

3 ^ c {/ ： £ —^ R -^ — [ O ^ ooj } 满足条件： 


⑴ U; 
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27 


(2) 对非负线性组合运算封闭果 

(3) 单调函数列极限运算 封闭 ： / n £ / n 逐点单增 二> lim / 7 t e ^ 

n 

算子%满足 条件： 

(1) .40 - 0； 

⑵对非负线性组合运算封闭（锥 射)： hJ 2 e M , 0 l c 3 ^ 0^ A ( C ] f , + 

^ 2 / 2 ) = ^ Af { + c 2 Af 2 \ 

( a ) 单调函数列极限运算封 闭：九 e 深， / n 逐点单增=>山!14/ 71 丨4此 1 /. 

n ti 

将满足上述条件的算子 A 的全体记作对 e 4 A 如果 
AfK 紅 V / e 方; 4 M 如果 4 v / T 々，▽/ Gl 

定义 l , 38 , 给定兔.称广为方程 


f ^Af + g (1.28) 

的最小（非负）解 ，若 广满足 （ 1.28), 且对 (1.2SJ 的任一解/,均有/> /' 

定理 1. 3 9 (存在唯一性定理)*最小解总存在且唯^若命 

/ (0) = 0, /(-+0 = A / ( n } +S) (1.29) 


则少 ”广 

证明显然.广龙，/ ㈤ T . 故极限存在（可以为 +oc ), 故由 

r = = lim\Af^ + fl ] = A， + 3 

ti n 


知 r 是一解.今设 / e 男是另一解，则/，如设/>/ ㈤ 则 


f = Af - ig ^ Af ^+ g ^ f^ l K 


故由归纳法知/ > 对一切 n 成立，当然就有/> /•. 这证得最小性.满足 
最小性的两个解必定重合. □ 

称方程 (1.2 S ) 是齐次的，若3 = a 此时易证 r = 0 ,下面是两个简单方程 
及其最小解. 


X = X X* = 0 ； X — X + 2 X* = 00 * 
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定理 1.40 ( 比较定理).龙满足 

A , g ^ g , 

则对于任一满足/ > 1/ + 豆的 /〔 冰均有 (1.28) 的 最小解 / 
最小解由 A 及 g 唯一确定,故可 记广二 m A ( g ). 

定理 1. 4 1 (线性组合定理)，设 G 可数，{% j € G } c f 十+則 


m A 


〉 ' ^&9$ 


^2^ s rn A { g s ), 


a€G 


吒 G 


定理 1.42 (单调收敢 定理) •设 { A } C 忒‘ TA 彳如} C 龙，％ U , 则 
A e J，5 e 黑且 m An ( g n ) t m A { 9 )> 

存在定 理中广 的解法称为第一迭代法.下述末一结论称为第二迭代法， 


定理 I . 43 .设 { gn }^ c 兔■命 


-⑴ 


9 U / 



- Af { n ) 


^r n) +^+i ? n ^ 1 


如 E 3 U 丨则 m A [ g )^^： f ^. 特别地，若命 

k=l n^l 


/ (1} = g , 


则 


_(?)=/* = (吃 


以上结果均可使用归纳法证; t . 

引理 1.44 .设 ％ \ £ [0 ? oo ), i，j e E 


(1.30) 


(Ul) 


(1) 设 Or 〖： KF ) 是方程 


— > : 工 j + &i ， 


i e E 


的最小解.给定假定存在 
>0,则 


I ~ ^0 3 lu 


in = j 使得…〜 


X * < OO => Xj < 00 . 


ii ) 若再设 


》: Ctj + fit ^ 11 i G E 


(1+32) 


n X 


X 3 


§ 1*4 若千判剔准則鼉小非负解 


特别地，若（％)不可约，则对于情况0,或者对于一切 i e E 都有 < 二 00 
或者对于一切 〖都有 < < 0 O ; 对于情况 ii )， 或者对于一切 i 都有 X * ^ 1 
或者对于一切 i 都有<< 1. 


(2) 固定设 （ J ： 『： ie £) 是方程 

Xi — c^jXj + bi . 


i E E 


( K 33) 


的最小解.则 < < oo 对于一切 i e 五成立当且仅当 < < oo 对于一切 
i ^ jo 成立而且 5 Z C jck^k <⑺.若 




ieB , 




则 < =1 对于一切 ie £ 成立当且仅当 < =1 对于一切 i / j 0 成立 


证明 a ) 设4 < 00且 


> 0 , 


则由 


00 >x- = ^ c ik x k + bi^ di.x* 


知< oo , 同样可证 


< 00 ,…， 4 < 00 . 


现在，不可约性推出^ < 00对于一切 j € E 成立. 

b) 假定 （1.32) 成立,显然由第一迭代法知< < £ [设< =1且 


- - iC i n -\in > 


若％ < 1，则 


4 二 + ^<^11 + + fri < 5^ C*j + fri ^ 1 + 




i^U 


这导致 矛盾. 因此有 r 


1. 依此递推， 


x h =1 ^ mm ^ 


由不可约性 t 实际对于一切 i e 尼有# 




c ) 若 « : i e £) 是方程 (1.33) 的最小解，则易见 ㈨ : i ^ jo ) 是方程 


Xt = ^2 CijXj +bi, i ^ jo 

jVju 
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的最小解 T 由此立即导出末项断言. LI 

下面给出最小解理论的初步应用.这呰理论更广泛的应用，可参考哗 ]. 

命题 1,45* 固定么则 （/, 广 k 幻是 方程 

Pik^k + Pij 

的最小解. 

证明显然= 叫 =/&设:,贝 [J 

由第二迭代法知，< t /+ n 

命题 1+46* 假设链常返，固定 j ， 则 （ m 。 :i^E ) 是方程 

— ^ ^ Pik ^ k + fij 

^■J 

的最小解」 


证明命 

设 y ” = <?)，则 

= «Ep^ ) + 4T +1U <+” + +n : oh. 1)4T +1) 

故由定理 1.43 知 < 二£ y ” = □ 

在以下的证明中，论； f 为单点集,无妨设 H = {(小对于一般有限集 H 
的证明，参考[10, §4,3 --§4.5]. 

定理; L 35 的证明定义一个新的转移矩阵户=(^)： 



此时0为吸收点，从而 Vj ^0是非本质点 T 由于常返点皆本质点 t 由定理 U 5 
知对任意 j / 0, lim # = 0. 又易 见忍 0 = / f ? j 及 ㉝ ，£ /； T )， 于是 

n—so J m=l 



§ 1 . 4 若千判别准則最小非负解 


31 


a ) 充分性设以）为所示的解，则 

_ 




从而 


s y” * e £,n > L 


因此 


+ E 硌、 I ： ㉟ +E 忠 


j^ f 


j>N 


j^N 


^ s yk 


^( n ) 




Si yk ' 


在上式中先让 7 i 4 oo , 再让 JV 4 X 、得到 / l0 = ¥ 0 .对尸应用命题 1.45 

可知 ，/⑼ =H POjfjO + Poo = 1. 从而 P 常返. 

b ) 必要性记户对应的过程为 x n ，定义 

承 ( n ) = P t [3 m ^ 0,使得戈 m g Tij ， 

则如 > 0,^(7!) =0; Vi > nj ( n ) = 1.因为 P 常返， 所以八 0 ; l，Vi > (1. 干是 


lim fii ( n ) — 0, i ^ 0. 

n—^oQ m 

选取化 T 使得尽(几 fc ) < 2 _ ' i s fc , 定义 yi =[ 巾(打 fc ) < 00: 则由 FW ) U 引理 

k^i 

lun y * = lim ^ 2 viM ^ lim ii t ( n k ) = 00 , 




A ;>1 


IX 


由马氏性容易验证 


f } i { n ) = Pipm ^ O , 使得尤 m > 

^ [叩爪》 l 使得戈 m > 〜戈] = J’l 


3 


= j ] Pj (3 m > 0, X m ^ n 


3 


J 2 pi /! A n ) 


因此对 1 ^ 0, 


yi = J2 ^( n fc) ^ Ipijyj = ^PijPj- 口 
k>l j j 


■ 32 * 
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定理 1.4 A 设 P 不可约 ， 则链非常返当且仅当方程 

PijVj — Vi^ i H 

有非常数的有界解. 

证明仍假定孖为单点集{0}，并考虑定理 1 J 5 的证明中所定义的马氏链 A 
假设链非常返，则存在 i / 0使得& =仏< 1.因为容易验证 

Pij/jD — fiUj i ^ E. 

jeE 

即 k 为所要求的非常数的有界解. 

反之，假设方程有有界非常数解0/土仏< M < 00.因为 

于是 

YlP ② yi = V “ 

j£E 

如果链常返 , 则 lim = / i() = I 从而 

n—oo 

< M{1 - p£ ] ) 0, n — 00+ 

因此 

t^o 

这与非常数矛盾， □ 

定理 1.36 的证明今设链正常返，则由命題 1.46 知， 

mto = Pik^kQ + 1, Vi e B, 

fc/O 

或 

5 二 PAWjto =^1,0 - 1, ^ E. (1-34) 

k^Q 

取如 = 0，沾 = 叫0, i ^ 0. 则当 i / 0 时，定理 1.36 的条件已满足 . 而当 i = 0 
时，由正常返知 moo < oo f 从而由 （1.34) 得出 

y^PofcVfc 二 y^Pofentfeo = moo — 1 < oc, 

k k 一 o 
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从而该定理的条件也满足.这证得定理 U 6 的条件的必要性. 
反之，设⑹为不等式 (1.26) 的解■记⑺■命 


⑴ 


yu i e E \ 







则 yj 2 ) = C ， yp ) 


c , 4 S 的 - l(j / 0) ■进而 





j 从 

卬 s)+- L ) 
j J^o 


分 0 


qi + W + yr 1 ) 


由此及归纳法可见，对于一切〃和 it y |~ < oo . 进而递推得出 


( n +2) 


^ ( l + c )^^ + vl 2) - n ? 


⑵ 


( n - h 2) 1 n (2) 


命 n — 00, 由定理 1,31 得出 


0 S (1 + c )/ to 7 ro — 1 

fio 兀 o 会 （1 + c) _1 > 0 


=> 7 T 0 > 0 

7 Tj > 0, Vj . 


(由不可约性) 口 


§1.5 几个典型的离散时间马氏链 

本节中，我们将就几个典型的马氏链讨论其常返性，埯历性等等.这些马氏 
链包括随机游动,分支过程，排队论等，它们都有很强的应用背景. 

随机游动 


如下给出的 E = Z ^ 上的马氏链尺称之为随机 游动 : Ri 


i+1 ~ Pif Pi+1 


Qi + i^Pii = r iji 彡 0 且 pi + & + h = 1 (i > 1), pu + r 0 


■ 34 ， 
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假定 ^>0, r ? ^0( i >0), q t >0{ i ^ l ). 显然:如 V ?_ ^ 0, r , = 0,此过程有 
周期2;否则，为非周期的.假定> 0,从而过程非周期,此过程也通常称为半 
直线上的随机游动.记 


^0 = 1, 一- 


PoPi " Pi-\ 
q 他 … qi 


i ^ L 


(1.35) 


下面将利用前面几节的结论来给出随机游动的常返性和正常返性的判别准 


则 ■ 


⑴ 

⑺ 


链常返当且仅当 E — 

i=0 ^iPi 



链遍历当 a 仅当 


CX ： 


i=(J 



此时平稳分布为％ = fii / f - i . 

考虑方程 5 Z PijVj = Vt ^ 即 

j 冲 


<hm + nyi +pm - yi, 

㈣ i + r 2 y 2 +p 2 妇尸 y 2 , (L%) 


应用定理 1.47, 为证明第 （ 1) 项断言 T 只需证明方程 ( IM ) 有非常数的有界解当 
且仅当£丄 < oo. 以下将证明卯^ 0, ^ 1为方程 (l-3t>) 的 

i=0 ^iPi i=0 l^iPi 

非常数的有界解+事实上，因 为〜二 1 -仏-心容易验证 


QnVn-i ^ ^nVn + PnUn^l 


ti — 2* 


-1 


n 



：0 


MiPi 




i^O 


MiPi 




0 


MiPi 


— On __^ + Pn 

f^n -lPn-1 l^nPn 



现在考虑第 （2) 项断言，容易验证 ( fn ： i ^ 0) 满足& 阳二 化;>>，从而 
E ^Pii =心若 M = !> 〆 叫则％ =为 P 的平稳分布.因此随机游动 

i >0 

正常返当且仅当 


此时平稳分布为〜= }1 { /{1. 


fi < oo. 






排队论 


离散时间的排队论的转移矩阵 p = ( Pd 如下 




若 i = 0; 


Pu 


dj - i + i ， 若 j > i - 1; 
0, 其他. 


00 


CO 


其中 a h > 0, Yla k = l . 记 P E hi / ⑷ = 2 a k z k , z e [0, l ]. 我们将证明 

^•― Q fe = 0 fz ~0 

链常返当且仅* p ^ u 链正常返 ( ii 历）当且仅当 P L 

a ) 若 P > h 我们证明方程 II i 声 (丨 有非常数有界解.令 yi = A 

m 

由此方程得出 Yl Pij ^ = Y , 即 c = I ] = 

j 》0 1 i > i-l 

二: / ⑷■因为 /( o ) < i = /( l ) 且 r ⑴ = p > h 所以由 / 在 [ o , l ] 上的 

严格凸性和单调性可知存在0 < Co < 1使得 /(w =办于是 A = 4即为满足 
方程的非常数有界解， 

b ) 若/? < 1,取扒= A 则对? 〆 0 7 

JPij — 〉: = j f + 1 ) … -i 十 1 7 _ i 

J^O j ^ i -\ j ^ i -1 


p — 1 + Z S 2_ 


由定理 1.35 知链常返. 


c ) 若 p < 1, 取沾 = i/(l - p ), 如上 b ) 中所证有 

PijVj = Vi ~ i ^ 0. 

J >0 


于是由定理 L 36 可知链正常返， 


d ) 假设链逋历，即有平稳分布 ㈨： i > 0) .令 n ( z ) 


E TTj /,2 € (0，1)，则 


由 


J + 1 




^ ^ipij — — i +1 


■ J 十 1 1 

n ㈤ =+ = ^of(^) + -(n ⑷- 7T 0 )/(z) 

j^o j^O i=l 


即 


/ ⑷一 


z — 


m 

n ⑷ 


，36- 
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命 z u ， 贝 Ij p 二 /⑴=1 - 7 T 0 < L 

e } 更进一步,可得到平稳分布的一个表示，即 


m = 


{1 - p){l - z ) f { z ) 

f (^) - ^ 


^ e ( o , i ). 


分支过程 

设 { YX lf k : n,k > 1} 是取值于 Z + 独立同分布序列， - i ] - a,(i - 
m .)_ 令 

Xn+l = > : ^i+ l ， fe ， 打 > 0 ， 

fcs=l 

则 ( X n ) n ^ 是马氏过程，其转移矩阵 P = (&) 为 


Pu = 



很显然 T m = 1，即0为吸收点.问题是=? / w 称为过程停止分支的概率即 
所谓灭种概率，下面将 证明： 

定理 1-48. 


(1) /to = (/io ) : ； 

(2) 令 G ( z ) = f ： a r z\ze |0,1)，则 / 10 是 z 二 G { z ) 的最小正根.且当 

i=0 

£“以 1 时 > / 10 = 1 ;而当 #>1 时， / 10 e ( o ， i ). 

lc =0 


证明函数 G ⑷即为随机变童 r 的母函数.容易证明若随机变量^独立，则 
其母函数 G 5] G , 与有 关系: G ^( z ) - G ^ z ) G v ( z ). 设 X 0 二 i , 则有 




k =0 


= = i ] 


k^Q j =0 



Z 


k 




fc =0 >=o 




Pt [ x n - j ] 
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■37, 


7=0 Jk =?0 Lm=l 


J 


Yn ^ i , 


[P 孤 = 脾卜 G iin (G 柳 Ol ， 


f =0 


且 G lfi ( z )- G{z)\ 于是由归纳法易得 G iin ^{z) = GfGh ⑷）且 


G hn (^) = G ( G (… (G(z)) •••})， GU^) - GU4、 



7 i 重 


注意到 p £) = Gi ,„(0) 及 / i0 = ⑵，则有 / i0 二 (f l0 )\ 故以下假定 

X 0 = 1. 记勿 = o ，' 二 G (^_0 - 则& T 夕 e [0，1]且夕为满足方 

m Z = G(Z) 的最小非负解.同时容易看到 C ?(4 是单调增的凸函数且 G ( l ) 二 1， 
故方程 2 二 G ( z ) 在 M (0, 1] 上至多有两个解,若/> = 0(1) > 1，则 2 = G ( z ) 
在 z G (0, 1] 上恰有两个解，于是0 < 夕< 1■若 p = C (1 K 1,则 z = G ⑷在 
^(0 ? 1]上只有一个解，即 

而由& 的定义 f 可归纳地证明 z n ^ P % ] - 事实上， 

^0 = 0, = G[0) =: Pio = a 。， 

2 n = C ? Un - l ) = ^0 fc ( PlO _1) ) = = M ?. 

fc>o 


因此 / u > = ?. □ 

下面讨论一类扩展的分支过程,即过程到达0以后可以某种概率 A 跳到状 


态 r . 具体而言 


定理 1 . 49 . 


Pij 



Pj , 若 i ^ O ; 
Pij ， 若 以 0- 


(1) 扩展分支过程戶 =( 知）常返当且仅当 

(2) 假设 = •当 G ' ⑴<1时，链正 常返； 

⑶若平稳分布: i e £) 满足 m :=冗 h < oo, 则 p < 1 ， 

k =0 


证明 （1) 由定理 1.36 的证明过程知链 P 常返当且仅当对链 P，/io = UVi>l 
而这又等价于 
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⑵注意到对^ 而^二 f ； 


以则 


C50 


oc 




n=l m^n 


由命题 1.46 知 mo 0 < oc 当且仅当 


CO 


C 3 C «X 


= - G (^- i )) < 00 


n 


n^l 


Ti 


其中& 

&于是 


p [ l } < 1 ■再由 G 在 (0,1] 上的严格凸性 t 存在6 < 1使得 sup G f ( z ) ^ 

i £[0 ,lj 


- G ( z ) 



G f {z)dz^S{l-z)^S, 


2 


G ( G { z )) = / G f ( z)dz ^ 5(1 - G ( z ))^ S f \ 

Joiz ) 


因为补 = 0 r ^ n+ i - G ( aJ , 所以 


CO 


oo 


- G ⑷ Kp < 


CO 


(3) 记 n ( z ) = D 则 n ’( l ) = m ■因为 〜= Ett 扣且 C tt i ( z ) 

fc =0 i 

G ( z )' 所以 


OO 


np) = itjpjj z j =ttq y^Qj^ + 


i 


j=o 


1 j =0 


^n^G{z) + n(G(z))-7r 0 


上式对 ^ 求导并命 s 丨 1 可得 


p=G，(1)=1 if?^rife = ^ <L D 


§1.6 补充与习题 


1. 对任意可测集 A , B ， C , 有 P [ BClA |= P [ B ! yljP ( C 7| AB ] 



Si . fl 补充与习釅 


2. 定义 1.9 中的马氏性与如下性质 等价： 对任意 r ^ hh < l 2 < 
m < n 及 i ， j , k e E , 都有 

P[Xr - = i r ^n = klXjn = j ] 

=IPtAi = : ^ = Vl-^m = j ] x ~ — j ] 

3 . 马氏链 P 的 n 次幂 = ( p ^) 是此链的 n 步转移概 率:； 4 n) 

Jl 知二小 

4. 如果 > 0,则存在 m < n 使得> 0. 

提示：参照引理 1.12 的 证法. 给定 n ， 令$ = max 彳 m ^ n \ X m ^ 


< l r < 


P[^n 


j }. 


5* 证明 lim 

n^oo 


( n ) 


lim { l - s ) Puls ). (Abel 定理) 

蚵 1 


6- ( X n )0 O 为五 上是马氏链， 设…瓦 —忌的 一一 映射. 令戈 n =釗 Xn )， 则 
(戈 nK ^ O 是启上的马氏链，并具有与相同的性质 * 若4不是 一一 
映射，情形如何？ 


7.定义 a y 
次数，则 


广 00 ]， 其中巧= #{n ^ 1 : X n = j ) 为马氏链访问 j 的 


( a ) = l 当且仅当 i 常返; 


(b) 


■户 r 

当 J 常返，叫=心当 j 非常返，％ 

由以 _ T0M\r 、 LI it^TTTflB ^( fe ) 

ij 


提示：定义 a 


^ f - ■ m* ■_ • r -— 

3 MM > 吨并证明 


0. 


8 . 设 （ X n )^0 与 ( Y n ) n ^ 是两独立的不可约的马 氏链, 周期分别 为山和 A . 
证明当且仅当 A 和 d 2 互素时， （& := ( XM )^ 是不可约的，此时具有 
周期 did 】- 

9. (持队设）设仏： 0} 是取值于 Z + 独立同分布 序列， P [匕=^ = 
0，1，2,…).令 X n+1 - ( X n - 1广+心则 ( X n )^ Q 为马氏过程，并写出转 
移矩阵. 

(这是一个离散的排队论模型 . 表示第 n 时间段来到一个柜台要求服务 


的顾客数. X n + I 为 n + 1时刻等待服务的颗客数 

10 . (库存模型）设 {^} n > 0 是取值于 Z + 独立同分布序列， P [& 
0，1,2, ■，}.固定0<«<5<00,令 


叫（ 


X ㈠ 


义 n _ 《71十1 ] 若5 < ■ STti < & 


S — ^ n+lT 


若 1 S 5, 


则 (^)^0 为马氏过程，并写出转移矩阵 I 

(这是一个典型的库存模型 t ^为每天的需求童， ( a ,5) 为库存策略，即若商 



■ 40 ■ 


第一章《散时间马氏链 


品的库存童 X n 不多于 s 时，则立即进货到库 存置& 若商品的库存童多于 
^时:则无需进货 .） 

1L (基因模型）假设基因的种类有 两种： 一类为4型， 另一类为 B 型 ，基因的 
总数是 2M 下一代的基因构成取决于 27V 次独立的二项试验，即上一代包 
含 i 个 A 型和 2iV - i 个 S 型，那么每次试验的结果是4或 S 的概率分 
别为 

r 

Pi 二硕， 屮 =1 — … 

令为第 b 代4型基因的个数，则 ( X n ) n >0 为马氏过程，并写出转移矩 
阵.试证明 

(a) Q '2 N 是两个吸 收态； 

(b) 当0 < j < 2N 时， lim 此)= 0;而 tim ㈤=1 - "2 见 lim p { ^ N - 

n—^oo J n-^oo , n^oo l}£iy 

i /2 N . 


12* (分支过程)设化以 ： n ， fc 》 1} 是取 值于々 独立同分布序列， f \ Y n ^ k = ;] 




0,1,2 ，…■令 


x n 


Xn+l : ^n+],fc ： ^0 — > 0 


fc=l 


则 (X n )^ 0 是马氏过程,并 证明: 
⑷其转移矩阵 尸= 0^) 为 



Pij 




^ V 

£ 

fc =0 


jldx ^ 


o 


(b) 设 m ; EX u < r 2 ^ Var(JV0 (方差)，则 EX n = 


VarX, 


( T 2 m 


nu 2 f 


m 


m - 1 


，若 m ^ l ; 
若 m = 1. 


13, (—般状态空间马氏链）设 ( E ^) 是可测空间， P ( x i A )( A &^) 为转移概 
率测度.若X = (X n ) n? 0 随机过程满足如下的马氏性： 

P[X n ^i € = x] — P(x, A) t 

则称 X 为石上的离散时间的马氏过程，试写出 （X 0 ，X ls …，的联合 
分布. 


§1.8 补充与习厘 
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14. 设为 N 上的不可约的 t 非周期的马氏链.证明链非常返当且仅当 
对任意的初始分布,都有足 1 — oo a . S , ; 链零常返当且仅当上式依概率而非 
n 的意义下成立. 

15. 证明推论 1.19, 

16. (古典耦合）设 （ XJn ㈣ 与 (>； Wo 是两个不可约的非周期的马氏链.定义 
耦合时间 

r((j) = inf {n ^ 0 ： = Y n (w)} T 

构造耦合过程 如下： 

2 {^) = 1 如打 < t ㈣ ； 

证明耦合过程 ( z 丄抑 为马氏链 7 并讨论其不可约性和周期性，更进 一步， 
如 UnW 。 与 ( Y n ) n ^ ( IH ) 常返 ， ( Z rL ) 7 i >0 是否（正）常返？ 

17•设 ( X ^ 是常返的马氏链,且= z . 考虑 i 的相继的返回时间 间隔： 

n 二 > 0 : X n = i}, n+i = inf{n > r k \ X n ^ i] - r fcl A; ^ 1. 

( a ) 证明 r fc , A : ^ 1 独立同分布 H 

( b ) 令 = X n+Tl t 则 ( y n )^ 0 是时齐的马氏链，且与 ( X n ) n ^ 有相同的 
转移矩阵. 

18* (双随机阵）设 P = ( 阳） 为有限的不可约双随机阵，即 Y：^j = hj = 

^ 1 

I , - - m . 证明此马氏链的平稳分布为{1,2，〜，爪}上的均^分布丄 

19, (对偶过程）设 P 为马氏链^为其不变测度.定义而二~即/知证明 
户=(色』）是马氏链. P 称为尸的对偶过程.并由此证明 

( a ) 马氏链 P 不可约当且仅当其对偶过程戶不 可约； 

( b ) 马氏链 p 常返当且仅当其对偶过程户常返； 

(.) 马氏链 P 正常返当且仅当其对偶过程 P 正常返. 

20. (可逆性）马氏链忍称为可逆的，如果对任意的时刻 及状态 i,j € 
尺都有 

P[X n = UX m = j] = ¥[X n - j, X m - ij* (1 37) 
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( a ) ( L 37) 等价于对任意的时刻 n …及状态 i u …， i m GE ' 

= i !， …, ^ n JrJ - hn ] … ， A^ m = i!J + 

( b ) 马氏链可逆当且仅当存在平稳分布 ㈨ ）使得 ^ Ptj = ^ Pji , 

21- 设转移矩阵 P 的第一列为 {^ o »9 ii ■ ■ } 且 Pm+i = 1 - 化 i = H ■ 1 1此链 
何时不可约？并证明如果此链不可约，则链常返当且仅当 £^-00. 更进 

一步，此链何时零常返？何时正常返？ ' 

22•设转移矩阵 P 的第一行为 { g 0 , 仏… } 且 Pi ， w = 1，〖= 0，1 7 …■其中 
qi > 0 X ^-1- 证明此链不可约且常返.讨论此链何时零常返？何时正常 

返？ 1 

23. 考虑 S + 上的马氏链，其转移矩阵为 POt — ^ i^PiO — 1，其中⑷ >0， I >, = 1. 

♦ 

讨论此链的周期性、常返性与正常返性 . ! 

24. 如正整数 没1,521 ■ - ■ t s m 有最大公因子4则存在正整数使得当 n ；> NSt , 

有非负整数 使得 nd - 2 c i & i * 

1=1 

提示：存在〜 ，… ？ n m 使得 d = nw + ■ ■ - + n m s m , 令 g ==二 r ^ s^r = 

tti >0 

y ? 叫〜， M q^r + d . 若 r 〆 0 t 取 JV = ( r / t /) 2 即可， 

n t <0 

25* 设马氏过程 P 具有平稳分布 t 证明初始分布（即的分布）为 7 T : 则对 

任意〃 > 0, 的分布都是^这也是称之为平稳分布的原因. 

_ 

26* 有限状态空间的马氏链至少有一个常返状态，且不可能有零常返状态。进而 
不可约的有限状态空间的马氏链必定正常返. 

27. 设马氏链的状态空间 C 为不可约闭集，则 C 可分成 d 个不 交集： 

d 

m=l 

从任 一 G m 中的状态出发，下一步转移必定落入 G m+1(modd) . 

提示：可先固定一个状态 A 使用命题127,令 

G r = {j e C : 存在爪 > 0,使得 P ^ d+r] > o }, 

则 C = G m 且 n G s = 0 (r / 4 ;然后再证明所得的分解与预先固 
定的状 St 无关. 


§1-6 补充与习匾 
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28. 讨论如下马氏链的状态分类及其极限 分布; 



29•令 

证明 



0 < < 1 . 



30,讨论以下几个马氏链的常返与正常返. 

( a ) 考虑直线 S 上的随机游动，即 ， i-i — I - p{0 < p < 1) ?' 为 
整数.当 p = 1/2 时，称为対称随机游动.试确定 jff . 

( b ) 考虑半直线上的随机游动，即 p 00 = l - p ， Kt+i = p { i ^ 

( c ) 考虑直线 Z 上的马 氏链： p iM2 = Pi p Ui ., ^ 1 - p (0< p < lj,T 为整 

数. 


31+ ( a ) 考虑二维的对称随机游动 ， 即 


则此过程是两个一维的对称随机游动的独立耦合,从而此过程是常返 
的. 

( b ) 对三维空间中的对称随机游动（即从一点向六个紧邻点运动的概率都 
是1/6 结论如何？ 

32. 考虑如下的马 氏链： 

{ P0 Pi Pm 

^ PmPoJJl … Pm-l 

P — 

« « P ■ 

« fe I I 

■ ■ ■ _ 

\ Pi P 2 P 3 … P 0 

其中 0< po < l，Po + Pi + 〜+ P 7 n = l . 试确定其平稳分布 lim 

n—co 
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33. 运用 第一迭 代法证明命题1+45和 L 46. 

34. 证明定理 L 43 中第二迭代法得到最小非负解与第一迭代法得到的一致, 


35. 记，二 JEf /- 固定 j e 尾 给出如下方程的非负最小解 T 并说明其概率含 
义 ■ 

Xi 〉: Pih^k + - 

36. 设 P 不可约.固定 j £尽则 P 常返当且仅当方程 

— > : Pik^k Pij 

的最小解< = l t Vi € £. 

37, 设户由定理 L 35 的促明中所定义，则 

( a ) 对马氏链 P 和 AWO ，/ i0 = 心且忠 )= £ 

( b ) ]im r } i ( n ) ^ Pi [ HmsupJt m ^ oo ] ^ 1 - f i 0 . 从而若尸常返，则 

m-^oc 

lim i } i { n ) = 0, 

n—*oo 

38, 设 P 是有限状态空间上的遍历的马氏链，其遍历测度为 （7 T , ^ € £) .记 

!?=(‘)为 d iy = [(必则 

( a ) D 存在且有限，且‘二 ^ a /^ xv 对；一乂知=心一 ^ jrriij ,这里 
釉 = Er ，) ； 

( t >) YJij = 0且 ti ( D ) == Y , TTjWij ^ E 

j j ¥^ 

39 . 设 P 为有限状态空间上的遍历马氏链， P 为其对偶过程（见习題 19), 则 
m ~且 tr ( D } - tT ( D ) ■(带 的对应于过程 A ) 

40, 依照第五节中第一款的方法，讨论状态空间为 Z 上的随机游动的常返性 
和遍历性.即设 ( X n )^ 0 为直线上的随机 游动， 具有如下定义的转移矩阵 

尸 ： (Pijh 对 i e Z ， p i i+ i = pi ： pi s t-i - gijPxi = n 且扒 +gi + n = l 假 
定 A > 0 山 ^0,^ >0. 显然 ， 如 Vi t r t =0,此过程有周期泛否则，为非周 
期的.假定 r Q > 0,从而过程非周期 + 试讨论其常返性与遍历性， 


41- 在排队论中，假设单位时间来到的頼客人数分别服从 Poisson 分布和儿何分 
布，试分别讨论相应过程的常返性与遡历性，并在遍历的前提下，求出平稳 
分布. 
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42 - {排队论的对偶）设是取值于独立同分布随机变置序列,巧匕= 
- (i = OAX-y 令 X n+1 =( X „ + 1— 则 

( a ) ( X n ) n ^ 0 为马氏过程 , 并写出转移 矩阵； 

( b ) 记 P = £ hifc , 则链常返当且仅当 p 八 而链遍历当且仅当 p > l ; 

k-Q 

(C) 在遍历的条件下如何得到平稳分布？ 

(这是排队论的对偶 + 其含义是单位时间来的顾客数为1，而可以提供 
服务的服务员人数是随机的，即&表示第 n 时间段服务员数. 足 1+| 为 
n +1 时刻等待服务的顾客数 .） 

43,马氏链的转移矩阵 P = ( pj 如下： 

I bj ' 若 i = 0; 

若 j > i - 1; 

0, 其他. 

其中〜 >0上>0, Ea k = l , th ^ l . 讨论马氏链 P 的常返性和遍历 
性. 

44. (分支过程续） 

( a ) 用概率方法直接证明/川=[/ 10 ]' 

提示： 由独立性及“的定义可知& = lim pf . 

TI-+00 

( b ) 在分支过程中，若 P f fc 叫> 1，讨论当的行为. 

k=l 

( C ) 在扩展的分支过程中，记 P ( z ) = E Pk^ k ,z £ [0,斗若尸 (1) <oo R 

p<h 则如何得到平稳分布？ " = ° 

45.设 P 为转移矩阵，定义 

y { p ) ^ i su p \ pik —阳 I ， 

z k 

证明： 

v ( pn + m ) < 7『少(严) 

利用題 16 所定义的 r 证明 

^ supFij[r > n]. 
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从而若 

SUpE^jT < 00, 

_ 

贝 lj lim V ( P n )=0. 

71—^00 

46, 设 P 为有限状态空间■，/ V }上的对称的马氏链，即；^=巧 7 . 

⑷给定定义 

E ii n ) = HFi!^ t 1 

j 

J 

证明 E 认 n ) 是关于 n > 0 的非增函数.更进一步地，存在 C < 00和 
a < l 使得 

iogn + Ei { n ) ^ Ca n . 

( b ) 对函数也类似于（ I . 38 )定义 

a ㈤= 53曲 4 "))- 

i 

讨论什么样的函数0使得 t ( n ) 具有 （ a ) 中的单调性和收敛性. 

47. 对于有限不耵约非周期的马氏链, 证明： 

㈤ 存在 n 使得对所有 ^ j 5 p ^>0; 

( b ) 存在 C < 00和 p < 1,使得对任意的 i ， j ， 

\ p ^ } - dK Cp n ，n > 0. 


第二章连续时间马氏链 


§2.1 连续时间参数马氏链唯一性 

定义2丄 设 五可数 ■称 （ X t ) G 0 为 马氏链，若对一切 (Kh <4<1..<~和 

下述 马氏性 成立： 

— + *' 1 -1 = ^n-l] ~ = = ^n-1 ^ 

_ 

此链称为时齐的 ，如果 

n^t = j \ x s = i }^ pix t _ a - j \ x 0 = i \ =； Pij {t - s ). 

此时，记并称之为转 移概率矩阵， 显然,它具有如下 性质： 

(1) 非负性 P ( t ) > 0, 0(1; 

(2) 范条件 P ⑴ 1 = 1，即 = 1 T 

j 

(3) C-K 条件 ( Chapraan-Kolmogorov 方程）尸(^ + s ) = P ( t ) P ( s ); (对应于马 

氏性） 

(4) 连续性条件（跳条件） limF { t ) = / = (^). 

t—^Q 

1936年, A . N . Kolmogorov UE 明了如下结果： 

tim -—■qi e |0,oc], lim =： g 7 j G [0, oo), j / i, (2.1) 

t 丄 0 t i 10 t 

而且 E qij < 如已知极限存在，则后一结果是下式 

j 參 i 


pijif) 一 ^ - Pu(t) 
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及 Fatou 引理的简单推论.极限的存在性远非平凡.因为上面的⑷只假定了连 
续性，为导出零点的可微性自然不够，需要用到其余性质.例如第一个极限的存 
在性使用了次可加函数的性质. 

记 Q 二(句),并称之为 Q 矩阵.留心屮可以为％而且可能出现 ^ t 

这些情况在数学上产生诸多困难.好在实际应用中所需的几乎都用未 i 这么复 
杂. 

定义 2*2. 称 Q 矩阵 

全稳定：如对一切< oo ; 

保守：如对一切 i ， 乙扣=& ~ Qi ^ 

护 j 

对于全稳定情形，由条件⑷可推出过程的轨道必定是（右连续的）阶梯函 
数，因而我们也称之为跳条件. 

定理 2.3 (Q 矩阵的概率意义 


( 1 ) r,(A', e ，、 从而，若 a ， 0 ,则 P,\X s = iy s > 0] 二 L 即 

^为吸收态. 

⑵设 $ e (0,0 c ), M P T \ X Tl - j ]- 叫 /&(j ¥ ?)T 此处 n 为 （ X t ) 的第一次跳: 
n = inf {^0： X ^ X G }. 

证明 （1) 由过程的轨道的右连续性和马氏性，有 


V,\X S =： s ^t] ^ Uni P ? [A ti / 2 - = i,A ： = 0,1, - ,2 n ] 

n-^oc 


(2) 设 1#：/\令 


lim pUt / T 1 ) 




(由 （2」）) 


Rij(h) — 5P Jfi+h = 二 i] T 


则 




iim 

4 一。 P[X f .+h ^ i\X t = ij 






□ 




连续时间参败马氏链 




性 
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以下是连续时间马氏链的样本轨道示意图. 



从现在开始，我们总假定所给定的0矩阵全稳定且保守. 

由 C - K 方程冲 + s ) = P { t ) P ( s ) 出发，分别关于 i 和 s 在零点取导数，形 
式上可导出两个微分方程 (Kolniogorov (1931)): 

柯氏向后方程 P f ( t ) = QP ( t ), (2.2) 

柯氏向前方程 Fit ) = P ( t ) Q . (2.； i ) 

两个方程都是无穷维微分方程组 . 类似于微分方程，在实际中，我们知道的 
是 g 而非 p(ty 

定义 14. 称满足定义 2-1 中的条件（1)， （3 U 4) 及 P ⑴1在1的为 Q 过 
程，倘若 ^'(01(=0 - ^ 

现在，自然要问对于给定矩阵 A Q 过程是否存在？是否唯一？首先，回顾 
全稳定、保守的假设,因而有 

定理 2.5 .每一 Q 过程都满足向后方程. 

此定理的证明不算太难.由此出发 7 Q 过程的存在、唯一性就化为向后方程 
的解的存在、唯一性，然而，并非 Q 过程均满足向前方程.换言之,两个方程的 
地位并不平等1在进一步深入之前，我们说明这两个方程的等价积分形式- 

向后方程 Pij{t) = T f q lk e -^- s } p kj ( s)ds + S iy e ^\ (24) 

向前方程 Mt ) - T ⑷处，一 (2.5) 

这两个积分方程都有很好的概率意义.前者是关于过程“第一次跳的分解' 
而后者则是关于1之前最后一次跳的分解”.今详述之. 
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首先， e - W 二巧队在 fO,tj 内不跳 j . 如的_ 0,则在 fO ， t ] 内必有跳， 


Pij { t ) 



g?e 


fc # i 屮 


其中邮-⑽为在 [0， t ] 内不跳的概率密度， q ik / q , 为从 i 跳至 fc 的 概率; ~( d ) 
表示从 * 出发、再经过 t - s 长的时间到达，把 t s 换成 s 即得前一方程^ 


其次 3 依然设 i / j ， 则 


Pij ( f ) 


VJ>' 


= A :， X 5 +ds = 乂 在 f 5 + d 5, i ] 内无跳] 


—Jn 
k ^ j J0 


Pi [在 [s + ds , t \ 内无跳|尤=1义 


s ^ d $ 


= i ] 


P t [X 科如 =j|Jt 5 = fcj ■ ^ % [X $ - k 


t 




0 


e -^ $] p kj ( ds ) p ik ( s ) 


t 


k^j 


Jo 


e -Q3 {t ~ s) q kf p ik (s)ds, (因为 Pkj(ds) = qkj^) 


由此导出积分形式的向前方程. 

现在,我们可以陈述第一个主要结果 


定理 2.6 ([19]). Q 过程总存在.事实上，向后、向前方程有相同的 最小解 
尸— ⑴，从而任一 Q 过程 P { t }^ P min ( t )， 即 Pij { t ) ^ p ^ n { t ). 

事实上，依据第一迭代法，命 

p!?) ⑴ = 0 ， 

pir^to-E 4)( 妙+ 0 0 ， 

则 P ;;) ⑴ T ， ⑴ ■ 

在 Q 过程研究中，常使用一种更为简单的方法,即采用拉氏变换（如同常微 
分方程)，称之为预解式，命 Pij ( A ) - A >0, 此时， P ⑴的四个 

条件分别转化为如下五个 条件： 


⑴非负性 P(A) ^ 0; 

(2) 范条件 XP(\)1 ^ 1; 

(3) 预解条件 P(A) - P(^) + (A - ti)P(\)P(ti) = 0; 
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(4) 跳条件 lim [ XP ( X ) - /) = 0; 

A—►oo 

(5) Q 条件 lim X ( XP ( X ) - I ) = Q . 

进一步,两个积分方程分别化成以下代数方程 

向后方程 即 ㈧= L T ^ RitA ) + (2.6) 

t ^ i X + gi 

向前方程 Pij (\) = + IT - ( 2 . 7 ) 

X + Qj X+Qj 

关于这两个方程，也得出相同的最小解 P mln ( A ), 而且任 一 g 过程必定满足 

p{\) ^ p m[n (xy 

现在，得出 

(K 阳 ( A ) - P r ( A ) = X ； 為剛 — pg n W ]. 

如果 g 过程不唯一，则方程 


Ui = 

必定有非零、非负有界解，即方程 

(X + qi)ui ^ X ； qihUk, 

㈣ (2.8) 

必定有非平凡解.由此不难理解以下的唯一性 准则： 




定理17 ([20, 51]). <2过程唯一的充要条件是对于某（等价地，一切） A > 0,方 t 
程 （2.8) 只有零解， 


此定理证明的难点自然是必要性.即 (2 而有非零解时，构造出异于 P ^-{ X ) 
的 Q 过程 


F(A) = P miR {X) + ? 


事实上可构造出无穷多.因而非唯一时必定有无穷多个 Q 过程,这也反过来体 
现出唯一性的重要地位. 

此唯一性准则自然有很多应用 . 最简单的情形如次， 


推论 2 ,8.如 Af sup 由 < oo , 则 Q 过程唯一, 
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证 明设叫 为方程 (2.8) 的任一解.记 S = suptii < L 如& > 0,则 

I 

% 


U — sup Ui = SUpV ^ 、 似 Uk ^ f supY^ , 1 u 

^ £ feu * … 

qi M _ 

^ usup r-— ^ «—-— < U y 

i A + A + A / 

矛盾. □ 

定理 2.7 的最好的应用是所谓单生过程，留待以后再作讨论 + 此定理的优美 
之处是 Q 矩阵，而且方程 （2.8) 的最大解也存在迭代算法，然而,在应用中它远 
非想象的那么好,事实上，对于多维情形 , 方程（2,8)几乎是不可解的.曾有一些 

统计物理模型 ， 我们历经多年才找到觯答.下面是一种简单实用的唯一性充分条 
件】 

定理 2 .»([ 4 )).假定存在序列{&丄和函数必>0湔足 

(1) E n | E h sup q l < oo y lim inf <pi = oo; 

i^E n n — 欠 i^E ri 

(2) 存在 ceR 使得 E 恥 (0 厂么 iei ?， 

j 

则 g 过程唯 一. 


通常取 {£ U 为有限集序列.本质条件是 （2). 

证明 a ) 取 

Qif = i^j ； ?i n} = 


I 则由⑴知 sup ^ n) < 00 , 从而唯一决定 Q 过程 P n ( X ) - (4 n ) { A )). 其次，以 

^ = rV 0 代 i c ， 条件⑵对于 Q „ = (^ n ) ) 满足.由于 ( p ^{ X ) : i e £：) 是向 
后方程 



的最小解，由线性组合定理知: ie £) 是方程 

J 


A 


⑻ 

^ A + g (n) ^ + 

k^i A 十 
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的最小解.由条件 （2) 知 


杏 i 




^ik 


<f>k 




(n) 


■+ 


久 + 9 




A > c + 


(A + gJ n) )^ ^ ^Q t -I l Vfc+0i(A- c + ) 


h^i 


故由比较定理知 






< oc 


A > 


b ) 当时 ，对 于一切 4 c 私，有 


pTW : =I>?w 


j€A 






而当时 


^ S n ( A ) ^ 0 




AcE n 


k^ti 


^ + Qi 


故由比较定理知 


PTl ^^ prA ^ 


i G En A C 丑 w 


c) 最后 


ApX ( A )> ApS ^( A ) 




ApS(A) ( 因 （ p^(A>) 不中断 ) 


> 1 -入 E P ^\\) 4 >J 


>1 


j^n 

入么 1 

inf ^ 入一 fv 
i 參 E n 


inf d > 


X > c ^ 


命 n —oo 得出 


设 ( P ^ X )) 为向后方程的任一解，则由最小性及范条件知 1 < Aj^(AK 


Ap^(A)-l, 从而必有 P^(A) - P ^ iX ^ iJeE , 即证得唯一性 ■ 

§2.2 常返性与遍历性 




在解决了 Q 过程的唯一性问题之后,下一步的任务就是常返性与遍历性问 


题了 
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首先，需要解决状态的分类问题.对于连续时间情形,可以证明 

Pu (^) > 0 ? Vf 5； ( I ;(易证） 

p i 3 ( t ) 关于 f 在（0, oc ) 上或恒为正或恒为零，（难证） 

因而不存在周期问题. 

命 S 2.10. (阳 ⑷）不可约 ㈡ Q 二 （牝） 不可约 ■ 

以下限于不可约情形,且总假定 Q 正则（规则)，即全稳定、保守且 Q 过程 
唯 一 ， 

定义 2.11. 

(1) 称 P ⑷ 常返， 若对一切 h > 0 , 离散链 P ⑻常返《 p u ( t)dt ^ oo . 

⑵称 P ⑴遍历, 若对一切 h > Q ， 离散链/> ⑻遍历技= % > 0. 
对于连续时间情形,常返性比较容易处理.事实上，可归离散时间情形， 

设屮 > 0， Vi , 命 

Pij 二 I ^ i 1 j ★ Pti ^ 古 ， j G £?， 

则户 = fed 是一转移概率矩阵，以户为转移概率的离散时间马氏链称为嵌入 
链或鍵跃链.称为跳跃链的原因如下. 命 W - 依次为眺跃的时刻，即 n = 
inf{t >0: X t ^ Xo } 为第一次跳跃的时刻，= inf{t > r n _i : X t ^ X t -} 

为第 D 次跳跃的时刻.定义 Y n = x T + it 易知 （ y n ) 是以 P =( 知0为转移矩阵的 
离散时间的马氏链. 


定理 242 ([5])- 

rCx> 00 

/ 忠 n ( 牌 = 幻. 

n -0 

(2.9) 

这样， 由唯 一性， 

• 

. An ^ HT "! 



^00 -l 

(2+10) 


证明由于对于固定的 j 是方程 

a = Yl qikXk ^ + qi 、 + &/() + &)， ^ € E 

的最小解,使用第二迭代法 ，得出 
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其中 WT 为下述矩阵的 n 次幂： 

屯 ( 久） = ^j/(A + ^), i /j; qu{X) = 0, ij ^ E. 

命 A — 0,由单调收敛定理得 

/ = lim p ； 1 ； 1 ^^} - / q l + 

J{} — n ~\ 

由此导出所需断言. 口 

可惜,关于正常返性,这种等价性不再保持，而且不可比较，试想想其中的道 
理！当利用离散链 P(/i) 容易得到以下的结论. 

定理 2.13, 


⑴极限 lim ⑷=巧与 i 无关 • 

t — O 0 

(2) 过程正常返当且仅当如下方程解 唯一： 

A > 0 ， y^iTj = l, ^ = 0, i, j e E. 


然而,我们依然有类似于离散时间情形的判别法， 

定理 2.14 ({52, 29, 58]) •设 Q 正则，不可约. fi 为 E 的非空有限子集.则此 
链遍历当且仅当不等式 



S -1, 以 H, 

L 

J 

E E mh < 00 

j 手 i 


(2U) 


有有限非负解 + 

称链指数遍历，如果存在常数 O! > 0及 Cij <叫使得 [ Pij(t )-7 Tj| ^ Cij^~ at 
对于一切 i，j e 瓦和 都成立.最佳（即最大）的 Q 称为指数濂历速度+ 

定理 m ([58]). 设 (2 和 同上， 则此链指数遍历当且仅当对某 A >0, A < 

qi { ii ), 不等式 


QtjVj ^ — Ay t — 1^ i ^ H } 

I 

3 

EE <myj < 00 


( 2 - 12 ) 


有有限非负解. 
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这些定理的证明的关键在于建立一呰递推关系.类似于离散时间情形的 A 
和我们定义 


= inf{t ^ T! ： X t e H], 

OO ., 

= E /S ⑴， 

n^l 

fin = fiH = Mol 


Am 


引理 2 * ie .命如 =— > 氕好 =E p 小则 / 以 ：⑪厂 f { J f ^ ] 

Qi j ^ l ! 

进而 (fm : 是方程 


E 細 . fi ; 


x i=Yl ^ ikXk + 朽" 

k^H 

的最小解.若 H 非空有限 1 则此马氏链常返当且仅当对于一切 i , 


(2- M ) 


证明注意 


flii =Pi[^ = ^ PiH 


及 


Jn 

JiH 


4 3 ) 


Pi [a 抒二 r n+ i ] = ^2 [cr// - r n\-Yl PaH u > L 


k^H 


k^rH 


然后，前一断言由第二迭代法得到.后一断言可由定理2+12,命题 1.45 和引理 
1.44 导出. □ 

引理 2.17. 




(U+i) 


(0 = / Qie 

Jo 


qiS 


Yl Pikfknii - ^ + X ] 拓 n > 1. ( m ) 




HH 


证明由定理 2.3, 有 


⑴ 


f iH {t) =Pi\(J H ^Ti >t] = piHS 




其次 


— i j 


Pi [(Jff = r n+ i >t^T-[]+Wi{a H - T n _K T Ti > ( 


:I + II , 


n > L 



由强马氏性得出 
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t 


0 


t 


0 


Q, e ~ QiS Yl 拓 々心 = r n >t - s ld.s 

k 來 H 

E P^fkih f - R ) ds 

k^H 


和 

/ £XJ 

V’ E Pik^kl^u ^ ^ Y1 P 邊 fH” 1 、 

kiH 

然后，由归纳法得出所需断言. 口 

命 


00 

O ):-/ e Xi f ^ } ( t ) dt , e iH { X ) = ye ( ^, 0< A <& Vi f _ E ， (2.16) 

^ n=l 


引理 2.18. 我们有 


( 1 ) 


^( A ) 


( 71 + 1 ) 




J P 


iH 




(A) 


Qi 


9 i 


A 


k^H ^ k(H 


特 别地. ( eW ): KE ) 是方程 




Qi 


Qi — ^ 


E ^ + ^ r x f ^ 

k^H ^ 


(2.17) 


的最小解. 


证明只霈证明后一断言，为此,应用定理 L 43 于 



⑴ 


P^H 



( n+U 


C50 


kin 


Qi 




⑻ 


n 


并注意由引理 2. w, gi = f lH { ieE ). □ 

引理 2,19. 若链遍历，则对 V i e H , e iH (0) = E^ h < oo , 进而对 V i e 

证明 K ) 命 A ? 则対 i G tXH < A + 再令 ^ t ]> 由用类似证 
明 （2.4) 的方法可证 


阳( ㈣〆 + 乂、(卜咖聯 


(2-18) 
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Pioii - ■ Ptn-ii > 0^ 

因为 eg (0) < 叫由引理 1-24 及引理1+44即得后一结论， □ 

定理 2.14 的证明 a ) 假定链常返，则由引理 2.16 知 f iH = l 对于一切^成立+ 
从而由引理 2.18 知+ : ieE ) 是方程 






[ Pik^k + 


k^H 




入， 


gE 


的最小解. 

若链正常返，则由引理2,19知对 V i G E , e iH ( 0 ) < oo , 命的= 0 ,i e H 和 

则对 WH , 


^jVj = e 如勺 h ⑼ = _ i- 

J 

同时 

EE 峽 =E 阳⑼ = n( ㈣ 开⑼ -1) < ⑺. 

i^H j=^i i€H 

故 (2.11) 成立， 

b ) 反方向的证明类似于离散参数情形.设 ( A ) 是方程 

I E [納 < OO 
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的最小解.定义 


Ci 


liH ' 

i 


则 


Ci 十 f s 0， i e E 


于是对 V A > 0, 


'- c ^ S ITTT^ - c ) + TT7 1 - k E ， 


Xc 




A + 9 t 


A + % 


此处 f 1 = 0 A inf { Cj/A ■ j £ £} > — oo . 

又, ( MX )) 满足向后方程 (2.6), 由比较定理（定理 i . 4 0 ) 得出 


Xi - 


C> - Xc), i e E. 


现在 t 由正则性， ^ = It 从而 


Xi ^ V!ptj(A)cj, i e £, A > 0* 


进而 


即 


由于 


可见 


^ P*j( 久 )+ Pij(A}Cj 



- 1) 




j€H 






入 Pij (入)(~ - 1), i e £, A > 0, 


je/f 


|ini Ap^(A) = Pij(i) ^ ^ ^ 


0^1 + ^ 7Tj(Cj ™ 1) 




由不可约性：这说明对于一切 A h > 0. 


□ 
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§2.3 单生过程与生灭过程 

我们己经讨论了马氏链的四个基本 课题： 

⑴唯一性，⑵常返性，（ 3 )遍历性，⑷指数遍历性+ 

所有的判别法都使用了检验函数（的）或（么)，这是一般情形所能期望得出 
的最好 解答. 无需检验函数的马氏链，主要只有 两类： 类是单生过程 t 另一类是 

分支过程了我们先介绍单生过程. 

定义2+20, 称 Q = ( 知 ： e 为单生 q 矩阵 t 若知 +1 > 0 但 |+ . = 
( U 会> 2 ■而称 Q 为生灭 Q 矩阵 ，若 

=: ~ > 0 (i > 0) 也卜 1 =: a > 0, 

而且对一切 [i - j | ^2, ^ 0* 


下面,我们稍许放宽 条件： 即允许 


N := max {? + 1 : ^ i+1 = 0} < oo . 

r 

当 .V = max 0 = 0 时,则回到单生 Q 矩阵，当# > 1 时，则分别称之为 单生型 

或生灭型 Q 矩阵. 

唯一性 


定理 2.21. 对于每 nW ， 定义 m n = g ~ i +L (l + e ' E 1 m , f ； g n ,) T # 

j=0 k=N jsCl 

约定 E = 则 Q 过程唯一当且仅当 £ m n - oo . 特别地，对于生灭型，我们 

0 n^N 

有 


m 



a 


b n 6 AT 


• ■ ■ 


bn 


n-l 

E 

fe=/V 


叫 +1 … fl 

bk … 


N 


证明 a ) 只需证明对于每 A 方程 


= ^^j^7(A + 5i) : i ^ 0 

的最大解 K ) 恒等 于零. 当 iV > 1 时，集 {(X V ■ ， AT - 1} 构成了此链的闭子 
类，从而对于一切 ^, V -1,^ = 0. 

b) 定义 ^(i<fc ， fc>l) 及 

J=0 


Jf、= l' k^N; 

#/ 似+】， k >^ N . 


(2-19) 
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n . 一 1 


则叫= y ' n - hiC 1 + I ’ " + S N . 由归纳法得出 

1 k = N 




n ^ N . 


( 2 / 20 ) 


C ) 设 （ A ) 满足 方程: 


(1 +^)^1 = Y ^ qijUj，I > 0; 对于一切 s AT - 1，他 = 0 但 uat 


■ ( 2 . 21 ) 


OO 


应用 a ) 于 A = 1，只需证明（叫）无界当且仅当 [ = oc . 由 (2.21) 可见 

n=N 


n- 1 


u n ^i -u n ^q ~^ n+1 - u k ) + u n 


o t ) 


( 2 - 22 ) 


k=Q 


从而& 关于 i 单调 上升， 本证明的关键在于下述估计 


^ Ufc+1 — 乜 + Ukm k , 


k ^ N . 


(2-23) 


为证 （2.23)， 使用归纳法.留意 m jV = 9心+1 [1 + ~ 叫十 i 一 W 并顾及 

(2.22) 得$ 


n- 


Wti+ 1 ™ = 9n,n+l 


e - 


< lnH u k^l - ^ k ) + 




Jt = jV 


假定对于一切 k : N ^ k ^ n - l , (2.23) 成立.现在考虑 fc = n 情形，那么 


&n fl — ^71,71+1 


(^-1) 


■ 

E + u n 5 m n 


N + l , 


h=N 


而且 


n-l 


^n+l ^ ^ 9 忾上 +1 |( 邮十 i - 叫） 必 、 Fp +ql N ~ ]] 


te=jV 


n—1 


+ ^2< ln ) r ^ k^k + ^n 


k=N 


< C ^ N+i - ^ n )^ N) + —^- l + q ( n N ~ l} 


n-\ 


9 n . n +1 


H W 


h=N 


ti ^ AT + 1, 


= - ^ nWI N) + Un ^ 
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d ) 最后证明 ？ （屮）有界当且仅当 ii > £ 17^ < oc ^ 先设 ia 
ooJ _(2,23) 得出 R 


:« lim 


< 


n 


R= mk ^ lim [ {tijt+i - Uk) = Uoo - l < cq 
k~N 


k=N 


反之, 设 it < 00 .因为 


u 


且 ^>1： k ^ N , 


k=o Uk 


u k 


可见只要 u k ^ i / u k … 1 — 0,就有 


n^f ^ 


k 


进而 

同时敛散 t 但由 （2.23) 和 （2.20) 得出 

0^u k ^ 1 -1 <{u N4] -u n )u^ 1 fI N] +m k 

S [1 + (叫 +i - 叫}〜，”]™々. 

综合以上事实，便可导出所需结论. □ 

下一结果说明，对于唯一性而言 ， iV = 0情形是本质的.其概率证明也十分 
有趣 I 

定理 2.22. 设 iV > 1. 任意取定正数序列 (m N - 1 )— 如免对)二0,定义 
9 m+i = b u qi =qi + bi \ 而对于其他的 j 定义如= 叫则 （如）过程唯一当 
且仅当（知）过程唯 一 +换言之 ， iV > 1的情形可化为# = 0的情形 ■ 

证明以 （ X t ) 和（ X *)分别表示由（叫）和 （ b ) 所决定的最小 过程. 我们需 
要证明在每一有限时间上， （ X f ) 比 （ Z t ) 多跳有限多次+设 （ X t ) 为一最小过 
程，它对应于如下 Q 矩阵 ( qijY 当1 S W - 1时，& = 0;而对于一切 i > N ， 
q l3 = qij -留意对于每一 iV - 1 T ( X t ) 以参数为备的指数律停留在 i 处,然 
后跳到其他地方+这是仅有的方式使得（ X ,)产生比（元）更多的跳，由条件独 
立性及 JV < oo 之事实，这种眺在每一^限时间区间内至多只有有限多.这样， 
在每一有限时间 K 间内，至多比（无）多出有限多个跳.同样的结论适用于 
和（兄)，因而诋得所述断言- □ 
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常返性与正常返性.命中概率及其一阶矩 

当 iV = 0时，下述两定理分别给出过程的常返性和正常返性 判准； 而当 
AT > i 时，它们分别给出过程以概率1命中集合 {0, ■■- 和命中时间的一 

阶矩有限的判准. 

定理 2+23. 若 N = 0, 设 Q 不可约.若?设对于每> iV , 存在 k …， i m ， 
使得 ‘ S — 1 且 … > 0.命〜= inf{t > 0 : 《 iV — l }， 则 

对于每 G # (如 # > 1 ) (相应地， i > 1 ( 如 N = 0 )), 当且仅当£ = do 

n=N 

叱 r [ T N < ㈣ 二 1 ，其中 （ FP ) 由 (2.19) 所定义，对于生灭型，= 1， 

F}l N ) = ^n+i - ^ a n /(fejv+i … H n> N, 

定理 2,24, 在定理 2.23 的假设之下 ， 对于每 i > N (如# > 1)( 相应地 , i > 1 

(如 Y = 0)): 当且仅当 d := sup E </ f ： Fs N) < oo 时， EV n < oo, 其中 

k^N s=N 

/ n-\ s \ 

— 0, tin — ( 1 + ^ q n j ] /^n+i, u > N. 

\ S^N j =0 / 

特别地，对于生灭型，4 = 0,乂 = 1~+^ 1 a k fa n /( mn > 

Ar ^ N+l 

定理 2.23 和定理 2.24 的证明 a ) 我们先证明 1 的情形可归结为 N = Q 的 
情形. 

不失一般性，可将彳0, …， iV - 1} 视为单点 0. 所得到的马氏链是以0为吸 
收态的单生过程.这样 T 我们就把 N > 2的情况归结为#二1的情形. 

给定一个马氏链,把其中的一点 } 例如说原点改为吸收态，得出一个新的马 

氏链 { X t ). 置 f 0 = inf{t ^ 0 : X t = 0}. 则由定理 2.12, 命题1,44和定理 
2,14知，原马氏链常返（相应地，正常返）当且仅当 F [ f 0 < 00] = 1 (相应地, 
E ^ 0 < oo ). 这样，我们就把 iV = 1情形归结为 iV = 0 情形. 

b ) 往证常返性.先 证：若 g = (%)是正则不可约 g 矩阵,则相应的 p ( t ) 
常返当且仅当对于某（等价地,任意）固定的允,方程 

而= Qik 工 kj %， 0 ^ Xj ^ 1, i ^ E (2.24) 

只有 零解. 

事实上，由定理 2.12 和引理1,44及引理2,16,只瓣证明方程 

而= L qik^k/^i + i ^ E (2.25) 
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的最小解 （<) 恒等于 1. 注意方程 （2.24) 是方程 (2.25) 的齐次方程，另一方面_ 
由于 ㈨ 二1 J S £；) 是方程 (2.25) 的非负解,从而对于 一 切 k < 1,综合以上 
事实，便可得出所需断言. 

c ) 现在，为证明过程的常返性、只 需证： 当且仅当 g if 1 < %时，方程 
(2^24) 有非平凡解.取 j 0 = 0. 则方程 (2.24) 有非平凡解当1仅当方程 


无 i = 〉 : '^0 ~ ^-3 ^ G E 

有非负有 界解. 但后一方程的解唯一： 


尤 0 = 

A+l _ A = 




Tj ) + Wr 






显然， A 关于 1 单调 上升，因此， 问题归结为证明 ：（々） 有羿当且仅当 f ff > < 

k-U 

oc . 命 使用分部积分公式 

k^l 



n-l 

- h)v k = J 2 U k{^k - ” k+1) I 

k=l 


得出 

i — l i—i i — 1 

D ) = - Xj ), 

j =0 j=l 

从而 

1 ~1 

而 +i — — y^9^(^?+i - x ))/%、+[ + 9!。)/% !+11 i 3 L 

• j=i 

这说明 := 而 +i ~ i ^ 1) 是方程 





j = l 

的非负解、但此方程的解也 唯一; 


i ^ 1 


I— \ 

= #)/ 此 ， a = + ?! 0) /?1^+1> ^2- 
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由归纳法易证 





>1- 


综合以上事实得出 








fO ) 


i ^ 1. 


这自然推出所欲证者+ 

d ) 最后证明正常返性.为此，使用定理 
( Z 11)( 取 H - {0}) 的非负解-则 




( W ) 



0) 为不等式 






叫 ) + 1 =[〜内 + 1 ~Y1 ¥ 广 Qk,k^i a k + q k ^k 


7=0 


1 


k 


- u j )- 


j 


j=0 


由此及归纳法得出 


^ 如 -d k , 


其中 


Vk = 叫 +i - 恥 . ^ ^ 0 


因此 


0 < 


+ i 




s=0 


(自 


k 




s 


f_0 


V 5=0 


• v 

■ I ? 


这给出 d ^ ui < oo . 反之，假定 d < oo , 今 


邮：： 0, U\ £ \d,-oc), 叫 +j = 叫十 i^° 3 iii - r4. k ^ 1 


显然有 


Z =q 0l u 1 < 


j^O 


此外.对每 it > 0,我们有 


~ u k)= 办 〜 I - + i 


k—i 




心 rw '- Ea = E #(^ v - 心) 


s=0 


5 = 0 


^=a 


t-i 


… 十 1 -…) = ^2%j{uk-u]) + 
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即 1 = 0, fe > 0. 

J 

e ) 为证关于生灭过程的末项断言，注意 m 
E 义/ E H 0) =夺 m j 冬 p ( 0) -1 m , 而 拓寸 


^ n ° V ^ + ^ 于是 


3 ss 0 


— 0 


I ： raj F fl (0) - l / b ^ 可见若过程唯一且定理 2.24 的条件满 


0 


0 


足，则必有 I ： if > = 00 ,因而由 Stoit z 定理得出 




lim 


k 

E ^ 

s=0 

E ^ (0) 


£ m oc 亲 


00 


1 ^0 ■ ■ ■ f>fe 

——— i rr 

〜匕〜…叫十 i 


反之 t 若右方收敛，则由合、分比性质易见定理的条件满足+ □ 

下面，我们介绍一个使得 EV ~ < 00对于一切 i > iV 成立的较为简便的充 
分条件 ■ 

推论 2.25, 假设定理 2 . 2 4 的条件满足,倘若存在常数 Cl > C2 会 0 使得 


n-l 


j=o *■ Jfe=N+l j=0 ， 


N + 1. 


(2.26) 


則 E 1 t n < oo - 


证明 定 XG n = c , F ^ ] 〜 cm > N . 由 {2,19) 可见 


Gn ^ Cl H Qn ) F j N ) / Qn^l - C 2 


i=N 


-1 


^ { n ] hn^n+l + Ci ^ /q n>n ^ - C 2 


JV +1 


n—1 


射 1 + tf > c V ^+ i + c 2 E 旧 / gn ， 


n +1 一 ^2 


?=/ V+l 


l= ： iV-K 


_ ■ 

M n /g n .wh J] ri j) Gj/gn ,n+J- 


/V+l 


由此及的定义 s = 0 (见定理 2.23) 得出 


Gn = ^n/^n,Ti+l + 5Z 9ri^^Gj/ ^n,n+J y 


1 


_ / 1 、 

^ l/flin+l + S W ^j/9n,n+l 

i=4 十 1 


(2.27) 


n ^ iV + 1. 
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因为 GV = ci — & > 0 = 及 (2.26 )j — "+2 > l /9 jv + i h jv >2 = 

d N 十卜 再次使用 （2 26), (2.27) 和归纳法,得出 d n ^ G n ^ c , f ! i N) - c 2 ^ cirf N) 
对于一切 N 成立,因而 

n n 

sup d k / Fj. N ^ ^ sup dn/F^ S ci < oo, □ 
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分支过程 


一个典型的分支过程是具有如下的 Q 矩阵的马氏链 


i 入 P(h i ^ 1-1； 

-iA(l -pi), j ^ i; 

?tj - < 

iApj-i + i, j ^ i + 1; 

,0, j<i-h 

其中 > o ) 为一概率分布.此分支过程的背 景是： 假定在0时刻有；^个粒 
子，每个粒子分裂时间是独立同分布的，且服从参数为 A 的指数分布.同时每个 
粒子分类的粒子数（“下一代”）的个数也是独立同分布的,其分布列是 (py > 0). 
A 表示 * 时刻总的粒子数， 

如同离散时间的分支过程，0是吸收点（因为^ - 0 ), 我们关心的首要问题 
是所谓的灭绝概率 


Ti = lirn pio { t )^ 

t—OO 


由独立性可得 n 二圬，因此只需考虑 r = 7> 


记 


则容易得到 


轉， s) = i^0,s€ (0,1), 

j -0 


oo 

=棒 ，水 < f >{ t +% s ) =他 咖， 5)). 


固定 /i > 0, 考虑 h 骨架过程 = x nh : n ^ o , 则 


P[3n, = 0] = lim P[K* = 0] = lim P[Jf n ^ = 0] = lim F\Xt = Gj = r_ 

n— n—^oo t—^oo 
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于是由上一章的定理： L 48 可知 ， 对 V t > 0, r 为的， s ) 
由于 Pij ( f ) =^ij +<hjt + o { t ), 所以 


=.S' 


的最小非负解 




必 (M) : - + q^t -h o(0]5 J = ^ + Ai|P(s) - s] +o{t). 


考虑到桃 r )- 匕再令 f _[ ( X 我们得到 

定理 2 . 26 •令 P ⑷ = f ： 则 r 是方程 P(s) =. 的最小非负解，从而 


k=0 

oc 


当且仅当 y(iKi, 即 E ^Pk ^ 1- 

k =\ 

扩展的分支过程 

在很多情况下，上节所要求的独立性并不满足，即粒子之间会有交互作用, 
因此我们需考虑更广泛的分支过程1假设 q 矩阵具有如下的 形式： 








-i v X{l - pi), i > 1, j 




i l/ Xp 

I 

0, 


'j-m 


其他 


(2.28 J 


其中 r > 0. A > 0,衂 < 0, 艺 0; 0) 如前. 当 m = 1 时，称为线性的 

当 p i 时，称为次线性的> 1时,称为超线性的. 


记 


30 


A ( s ) = p ⑻ = Yl p ^ sJ ^ s e [o， 1 ] 


jf^O 


定理 2.27. 如果 M ; P f (l) ^ L 则分支过程 唯一； 当 y > 1 时 , ^(1)^1 还是 
必要条件 . 

证明首先证明当 M < 1时，过程唯一.由定理 2.22, 不妨 假定伽 = a 应用定 
理 2.9, 取 ： n}A = ; + l , 则 


[ ^ ij( f h -伞 i ] = Iti - 


S 

[ <hj{3 — 0 = r v X(M - 1) ^ 0, i > L 


/=?+! 


从 而乙甸 -屯） S 也 : O 0. 


假设 ^ > 1, 



aP 且 Af > 1. 为 ffi 过程非唯一，我们将与一个生灭过程作 


比较.令 r e ( po，po + Af -1) 待定. 构造生灭过程 化、 具有生速率 6 o — 0 } b t = 7 iT 
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和死速率〜=7说]，〗>1.因为 


CX5 


n-1 




n 


k= l 


叫 +1 … 




E ( 好 

rt^O 


00 


从而由定理 2.21, 此生灭过程非唯一.因此方程 


ai(Ui-\ - U{) + bi(Ui^i - Ui) = \Ui, uq 0,\ > 0A ^ 1 


有非负的（非零的）有界解.容易看到叫丨，旦 


^i+l — 叫 > Y'^ ~ 叫 - 1 ) 


i ^ 1, 


(2.29) 


由于当 r 』； p 0T 有 


00 


k- 




' / Pq 、 , 飞 

z 1 pm } 2 ('fj T + 1 > po, 

fe=l ^=0 


k =[ 


从而可选取 r e (POyPO + M - 1) 使得 


cx 


V 1 

l ^ p^l 

k=l ^= r (> 


fc— 1 A 

!：&) 


^ r . 


(2.30) 


由 （2.29) 和 (2.30), 对 Gl ， 有 


CO 


k 


51 叫一叫 ) = a ii u i-l -wO+7iX] Pk ~^ 1 E ( 叫 — U i^-l) 


k 


1 


<X) 


fc-] 


^ 咖 i-i - Wi ) +7 i(^i - ^ i )^ Pk + iJ 2 ( 

/==] f=o \ 

> (ii(uj-\ - ui) +■ h^Ui^i - Ui) = Xui. 


i 


由比较定理（定理1.如 ） 和唯一性定理（定理 2.7 ) 可知原过程 非唯- ■ 
定理 2.28. 分支过程常返当且仅当 P \ l ) S 1. 

证明由定理2.12,只需考虑其嵌入链 P =(知)的常返性，注意到 


■，幽 


Pij 


Pj-i-\-l 

1 - pi 
0, 


其他 


与 V 无关，所以由上一节证得的充要条件即知定理成立. □ 
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定理 2*29. 设.分支过程遍历当且仅当 


0 P ( s ) - ^ 




(2.31) 


证明只霈证明有满足以下方程 的解: 


峽 = E 内 > 0, j > < (X). 

i^y j 


(2,32) 


a) 首先证明满足方程 <2.3 2 ) 的解叫 i 从从而（士）有界.事实上 > 由 
于 1》 M ^ kpk = [ (A - l)Pfc + 1) 则 Pd > E 外，从而 2 l / p^+pi ^ 1. 

k^O te^O te>2 

- ^0?01 ^ J "Pi ^ 

只 2 = — -— — ^ - = ^1^ — ^ ^1- 

321 921 ^ PO 

假设内 『 < 内 -l < … < Pi 则对 j > 2 有 


9j-hu^-hi - f^jqj - ^ij ^ f^j f?j - 


i=0 


t=l 


註意由中值定理 


卜 1 




o 


k =2 


k=Hl 


oo 


^ ^ fpo - "广 】 [(k - l ) p k - "广 1 E (卜1)外 


fc=J + l 


uf ~ l { l - M )^0 : 


于是 ^ f^j 
b) 因为 


_ 

J 


Mj?j - [ 眺 j + 


SsO 


则 


-1 


"Pi) ^ + ^^ pj - i^l + ^j+l(j + l ) U J > Q } j ^ I- 


(2.33) 


在 (2.33) 式两边同乘以必再关于 j > 1求和得到 


O0 






Ms) 

P[a) — s 


(2-34) 
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在 （ 2,33) 式两边同乘以 （1 - sy ~\ 然后关于 s e (0,1) 积分得到 


00 


~T Jo 




注意 



^ _1 {1 - s) v ~ l ds 


v-l 


mm 

r(j + ㈠ 


r\j 


' — fj 

3 ^ J — oo 


因此沉当且仅当 


雄） 

o 尸⑷一在 


(1 - 5 广 Ms <00- 





§ 2 . 5 补充与习题 

_ 

(Poisson 过程） Poisson 过程 [X t ) t ^ 0 的转移概率矩阵 P ⑴二 ( 如⑷）为 


Pij(t) 


0, 其他 1 


试求其 Q 矩阵 Q 甸)，并证明 


P(t) 


Qt 


oc 

E 

n ^0 


( Qt) n 

n\ 


2. ( 纯生过程）（⑹例的 Q 矩阵如下:的 = qiii ^ 二 h > 0 (i > 0 )，叫 = 0(i _ 
j ), 记 r n 为第 n 次跳跃的时间, r = lim 则 p 0 |t = ooj = i 当且仅当 


n—►oo 


i 示 : 考虑 Ee^ r . 

3 + 对于有限状态的马氏链，向前方程和向后方程均成立，且 


O0 


m =e Qt = ^ 


n=0 


( Qt) n 

nl 


4. 对于有限状态不可约的马氏链，则有 lim pij{t ) =〜 > 0 且 

T—►CO - 




J 


5 . 证明定理 2.5, 


提示：由 pij(s + t) = ⑷ Pfcj ⑷和 Fatou 引理易得心⑺ = ^QikPkj(t)\ 

k k 
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另-方面对 iV > i ， 

工 S Pi^( s )p^:j(0 PifA 名 ) 

k^i k ^\ r t h^i k>N 

- L 

kUk^i N 


p ,. k {^ kj { t } + 1 - Pvit ) + >, ihk(/h 


在前式两边同 除以& 再取上极限 

sJO 

&考虑连续时间的不可约的有限状态的马氏链.其 Q 矩阵为 = I ': 
…： N ， 且％ = . 给定初始状态 ，设乃 ⑴为/时刻在 Z 状态的概率，即 
/训二”义^定义 


Eitj^-^P^logP^t)^ 

ir ? 1 

证明 £( f ) 是关于的非降函数. 

7 . 考虑不可约的有限状态 （ A 「 < oc ) 的连续时间马氏链,试证其 Q 矩阵 Q 的 
秩为 /V - 1. 

S . 考虑有两个状态 {0,1} 的连续时间的马氏链.在0的等待时间服从参数 
为久 > 0的指数分布，在1的等待时间服从参数为 V > 0的指数分布.求 

Pou(0- 

9. 直接证明 (2.2) « (14) 和 (2.3) ^ (2.5). 

10+ 假设厂⑴的 Q 矩阵有界 ； 即 V & OJ < ex 、 则 P(f) 满足向前方程， 

11,若 Q 有界，则当 t | (I P ⑴一致地牧敛于八即 lirnsup j ^(^) - 6 tJ \ - 0, 

^10 ij 

提示：对矩阵 A 二 (ai ； ), 定义 ㈣ 卜 suplttjjj ， 则仍 -j|| S e 川训 -1. 

I 

32 .记 p xj { X ) = 

( a ) V t ^ ^ 0 => V A > O ^ p ^ fA ) ^ 0; 

( b ) V t ^ 0,J ： p tj (t) ^ 1 ^ V A > 0, A ^( A )^1; 

? 

(t:) V > 0, P(t r a 1 ) - P(^)P(5) V A,/i > 0 ， J%\) P[ji) t (A 
}i)P(X)P{p) 0 ； 

( d ) liin ^-( f ) ^ Sij ^ lini {\ pij (\) - S ^ j ) ^ 0： 

t—iQ 入叫 re 

(e) Ho = Q^ lim XiXpi^X) - q jy 

入 —3C 

13. 证明方程 （2.6) 和 （2.7) 有相同的最小解. 
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14. 由马氏性证明 

( a ) V i ' pa ( t ) 在 [0, oo ) 上恒为正： 

( b ) 若 3 r > 0使得 p ”( T ) > 0,则 v f > r ， 有 Pij ( i ) > 0 


15. (更新过程）设> 0)^] 是独立同分布 （ iid ) 随机变童 （ n )、 记 


A = & + A 十 ■ ■ ■ + 忍 ， n > 1，约定冼 = (I 


定义 N t = #{n : 0 < 心 S t }， 则称 { N t ) t ^ 为更新过程 t 

( a ) 若服从参数为 A 的指数分布，则况即是参数为 A 的 Poisson 过 

证明 EiV t = Var , V t = Xt . 

( b ) 若记 A / f . = EN u F n { x ) = < i ]， 则 

M t = Y , Fk ( t ). 

h =\ 


16. { 排队论）假定顾客在一个柜台前排队等待服务（如在超市出口等待付款)， 
以义记 f 时刻排队的长度（即顾客的人数).前后两个顾客时间间隔服从 
独立同分布参数为 A 的指数分布,而顾客接受服务的时间服从独立同分布 
参数为 M 的指数分布.试讨论此过程的稳定情况. 

17. 化仏 … 依次为跳跃的时刻，即 n = inf{t ^ 0 : X 0 } 为第一次跳跃的 

时刻 , h :义#不-}为第71次跳跃的时刻.则有 

⑷ m , …独立同分布； 

( b ) 若定义 K 则（ V ；)是以 P = fe ) 为转移矩阵的离散时间的 

马氏链. 

18. 证明若对一切 /I > 0,离散链 P { h ) 常返《 p u ( t)dt = oo . 

提示：由题14知 .(5(/ i ) = miii pii { t ) > 0,从而由马氏性有 


min 


max 

nh^t^{n^l)h 


Pu(t) ^ pain^Sih), 

Piz{t) ^ Pxi{(nk + l))/5(h). 


11 从 C - K 方程,可得到 V > tU > 0， 

[ \Pzj{t + h)- %⑷ I ( 2(1 - pa{hj) } 

3 

从而 V UhPij ( t ) 关于 f e 队 oo ) —致连续.并由此证明对一切 A > 0,离散 
链 P { h ) 遍历 Hm Pjj { t ) = TTj > 0. 


_ 74 t 


第二章连续时间马氏链 


20. 固定 A C 尽令 U = mf{f > f ): G 4} 为凫 的击 中时. 

( a ) 记 a = ¥ 2 [ r A < oo ] : 则对 t 0 ^4, ^ q t kXk - 0 . 

k 

( b ) 记糾 = Eji 则（认 : iGE ) 是如下方程的最小非负解： 

Vi = (\ A\ [ q ik y k ^ -1, i f A. 

k^E 


2i+ 对马氏链 ( x t ) m , 令 r o: = Oh 

⑷若丨是常返态,则 mr = +x] = 1. 

(b ) 若〗是非常返态，则< +ool = 1，且: T 服从指数分布. 

22- (接題 17) 若 (Xt)^o 具有平稳分布 a 而 (KO^o 具有平稳分布 A 讨论^ 
与I的关系， 


23. (线性人口增长模型）考虑如下的生灭过 程：& = im , b n — Xn + a y X y ti,a > 0, 
证明平均人口 M t = EA 满足榭分方程 

= a + (A — fx)Aft ^ 

从而当 A > /i 时 ， lim M t = oc 但当 A < m 时 ， lim = — 

t—^OC t — HX 5 fl — X 

24 . 若 二 1, 则 Q 过程唯 一. 

25. P ( t ) 不可约当且仅当 Q 不可约+ 

26. 若马氏链正常返，则 (2.11) 式成立. 

27 - 对正规的不可约的马氏链，证明 

(旬若 . upg ,< oo r 且马氏链正常返,则嵌入链正 常返； 

I 

i 

( b ) 若 ini qi > 0,且嵌入链正常返,则马氏链正常返 + 

i 

28* 考虑生灭过程％ - 5 n i > 1满足< 00,则此过程正常 

_ 

返,但其嵌入链不是正常返. 1 

29. 设内 > 0, f 扒=1，令 Ah U > 1;色0 = 1，0 1， 知 = 0 (其他 O 」)， 则 

« = 1 一 

离散时间马氏链 P = ( pij ) 正常返■若令的= Pi,qij - 仿〜0 #几则此 Q 
过程不是正常返， 

30 i 考虑保守的 Q 过程，令肿 f = 6^ > 0^ — < lk ， k-i > 0，友 3 1，如 = 伽 ■， 

对其他的 j ( 如 二 0. 
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( a ) 讨论此过程的唯一性和常返性. 

( b ) 假设0 < f..i = inf ^ i ^ ^ sup 切 qi 二 a < oo , 则过程遍历当丑仅当 

E k< lok < oc , 

31, 考虑保守的 Q 过程, .令伽&二 k > 0 ,qk = qk ,0 > 0, > D , 对其他的 J _ # 

Qij - 0. 讨论此过程的唯一性 ： 常返性和遍历性. 

32. 对 E 上符号测度//，定义其全变差范数为 

|j"l|var = SUp 〉 、 IMfi j 

l / I^J — 


证明 

( a ) ||/ i|]var - Xllwl - + 从而对概率测度 //, || mIW = 1; 

_ 

( V ))对概率转^矩阵 P ， 定义概率 (#)i 则 il ^^ liv^r ^ IlMllVar ； 

k 

⑷对连续时间马氏链 P ⑴， ||/ iP ( i ) i|var 关于 Q 0单调下降. 

33* 考虑生灭过程：心= cm + = 6 n ， cv 己，5 > 0,则 

( a ) 过程常返当且仅当 n <6或 a = <5 乂次 

( b ) 过程正常返当且仅当 o < 心 

( c ) 在其他情况下，过程非常返 ■ 


提示： 证明用到如下 Kumnier 引理：设序列 u Tt > 0 , 1 ^ >0^ l / v n - oo , 

n 

极限 k = lim v n u n / u n ^-i - ti n+ 】 7 则依 k > 0 或 k < 0,级数 Y ^ u n 收敛或 

n—^oc n 

发散， 

_ 

34. 讨论如下单生过程的唯一性、常返性和遍历性. 

⑷设 q ( i+i = 1,如 _ 2 = l(i > 2 ), q w = 1：对其他 = 0. 


㈨ 设 


a + Xi } j - i + l: 

dig 卜 \ J . = 0; 

<iij ^ ^ dipq^ ^, j ^ ! ， 2 ,…，卜 1 ; 

a + (A + of )*, j = i ; 

0, 其他 


其中 a > 0 ,X > i),p + q ~ 1 . 


35. (拟生灭过程）考虑二维 Markov 过程 { X t J t } : 有状态空间 

E = \{kj) : fc > U = 1 ， 2,… ， m }， m < oo, 
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其 Q 矩阵 如下： 

r A 0 C 0 
Bi A C 

Q= B A C 

B A C 


Q 矩阵中的所有子块是 m 阶方阵.证明此过程正常返当且仅当矩阵方程 
咖 + RA + C = Q 的最小非负解 ii 满足谱半径 S p ( R ) < 1,并且线性方程 

iio(^o + /JBi) = 0, rio( / - i?) _1 e ™ 1 

有唯一正解.而平稳分布 n = ( n D ， n lr * o 可表述为％ = u q r \ fc > o .这 

里 II & = (〜] j ■ ■ ■ , T ^ fcm )- 

提示：利用定理 2.13 可得 n^iC + iifcj + n k ^B = o , fc > i . 

36. (反应扩散过程）考虑状态空间上的 Q 过程，5’ 有限或可数.对 Ji e 
S,xe E , x ( u ) 表示 u 点上的粒子数， 

A 0 H - X ]. x { u ), y = x ^ e u \ 

心 ㈣ y = x - e u ; 

x { u ) p ( u , v) y y = x - e u - i - e V } u ^ v } 

0, 其他 1/ 一 z . 

其中 e 〗= (1，0 ,…)〆 2 = (0, 1， ■ ■ ■ ), … 7 v ) 为 S 上的转移概率矩阵且 

.讨论过程的唯一性、常返性与正常返性+ 
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§3,1可逆与可配称马氏链 

定义 3*1. 称（石 ) go 可逆 ，若对一切 0 < fi < f2 < …< 和 ii， …， in， 只要 

tn ― ― t2 - ti r (n-1 — ^n-2 = (3 — （ 2 ， . ■ 

就有 

= ^1 ? - ■ - >^t n = *n] = ^[^1 - in：' - = ^] ■ 

即时间 的倒转对于过程的分布并无区别，如同电影正放或倒放看不出差别一样. 
这有重要的物理意义 T 统计物理中称 为细致平衡. 

I 

特别地,若初分布是则由 

f \ Xo ^ i , X t = j ] = F[Xo = j t X t ^ i ] 

得出 

^Ptj(0 = (3 1} 

b 

^—^ ^iQij ~ (3-2) 

定义 3 . 2 .称户⑴关于 X 可逆 ， 如 (3-1) 对一切 f 成立.称 Q 关于 TT 可逆，如 
(3.2) 成立. 

定理 33 (存在定理 19704), P l ^( t ) 关于 tt 可逆 ㈣ Q 亦然 ■ 

定理 3*4. 可逆 Q 过程唯一的充要条件是 Q 可逆且 Q 过程唯一（允许中 断!) . 
在 （3.1) 式两边对 i 求和得出 

— = A. 
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Pit ) 可配称1 
P ( t ) 为势场. 

P { t ) 是保守的，即 P(0 存在一个与，无关的势函数+ 


这样 i 若⑴=1 (不中断)，则可逆测度必定是平稳分布,数学上的推广是把 

_ 

(^) 换成4必可和的正数列，此时把满足（: u) 的 p ⑴称为可 配称以 K 别于可 
逆.对于可配称过程 .（7T,) 自然不必是平稳分布 t 甚至过程也未必常返.这 便提出 
两个课题： 

_ 

CD 给定 a 何时可配称 ■? 如何找出配称测度？ 

⑺若 Q 过程可配称:何时常返？ 

为研究第一个课题，我们引进了场论的 工具. 为研究第二个课题，英国人在 
2fJ 世纪 8() 年代引进了电网络工具，后来英文书[叫里作了统一的处理（第7 
章) ■ 

考虑不可约的马氏链 P 0). 令 

^ij(0 ^ \ o ^ p v { t ) - logi : j G E , t > a 

称 k ⑴二 ( Mt )) 为 P ( t ) 的 (一 个）势函数，如果％⑷= " t ⑴ v : 八 f 
E't >(! 此时也称 P ⑴为势场. 

定理3,5 (场论基本定理). 下述 的命题等价— 


定理 3.6 (马氏链的常返性判准) . 假定 不可约 g 过 程有配 称测度 r 并令 -- 

%牝/ 中若叫 > 0,则在 Z ， j 之间作一条连线，并赋予 1 M , 的电阻，这样得到 
一个电网烙。那么 g 过程常返当且仅当从任意一点到无穷远之间的有效电阻 
是无穷. 

§3.2 谱隙估计 

考虑可数集 E 上满足如下条件的矩阵 G = (^): q tj i), U < 

q t ： : = ^ < oc. 假定对于某概率测度 ( tt ^ > 0 : t e E ) 和一切 

有 ㈣ ij = 那么，相应的算子 Qf ( i ) - fi ) ( fi - € E ) (逐点）在 

(实平方可积函数的全体）上对称.设尸(4)=如⑹是甶 Q 所唯一决定 
的 Q 过程.则不难证明 P ⑴在 I :\ tt ) 中强 连续： 

II 尸⑴ / - /II — 0 ，当 f — > 0 ， 
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此处 II 11 表中的 P 范数.尸⑴还是强压 缩的： !| PW / Kil /|| 对于一切 
#成立 + 以 L 表 P ⑷在 i 2 (7 T ) 中的强无穷小算子（与 n 有别!记其定义域为 
糊，我们所关心的是如下的 L 2 指 数式收 敛性： 

liP ( t ) f - 11/ .... MJ )\\ e - £t .. f 风 fe L 2 ( w ) : 

其中 e >0 为正常数. 

下面，我们要给出最大收敛指数的刻画.为此，定义算子 L 的谱隙 

gap(i) = /) : ： r(/) = 0 J/|| = 1}, 

此处 7 r {/) / dTT . 要看出 gap(L) 的非负性，只需 配方： 

，八 f' Lf ) 二 - = /i) 2 > ⑴ 

I j U 

其次，由基本谱理论（参见本章附录)， 

(: T ; D(/ ， /K+00 ， 当 HU . (: u ) 

而且 D ( f , f ) = 过程的唯一性保证了使（ 3 . 3 )右方有限的函 

^ ij 

数构成了定义域 ^( D ) - {/ G L 2 (^) : D ( fJ )<^} (此证明较难).今定义 

gM D ) = gap ( Q ) = inf { D (广 /) : 7 T (/) = 0且 tt (/ 2 ) = 1}. 

有了这些记号，我们可陈述关于收敛速度的基本定理. 

定理 3 义 ^ max - gap(I?) = gap(i). 

证明由于在谬 ( i ) 上,列义/) = -(!/,/), 可见 gap ( D ) < g 叩⑷. 为证〜 ax > 
gap { t ), 只需使用如下事实 

^llPCO/f = 2(P ⑴ / ， LP(t)f) ^ -^2gap(Z J )j|P(#)/iS 2 , 

S ^^( L ), < f ) = l \\ f \\ = 1, 

以及纠 i ) 在 L 2 ( tt ) 中的稠性.最后 ， 设/ 6 _) 满足 tt (/) = 0及11/11 = I 
则 

t 丄 o r t\v f 

故 □ 

仿有限空间情形（参见本章附录)，以后也常把 gap(D) 写成； 
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现在，定义伴随矩阵 Q = ( 如)的 图结构 +称 h 为一条边，如阳 > 0 (I / 
j \ 诸相连的边 a 从 . U 他 J 和各4互不相同）构成从 i 到 j 的 
一条路 T 假定对于每一对 i i 都存在一条从 i 到 j 的路.选择并固定这样一条 
路如其次、定义诸边 e = 上的正的权函数卜⑷ } 并命 E 帅+ 


c^r^i 


如 


匕力，置 a ㈤= 〜叫并令 


㈣ ⑷ 


u ⑻川 (e) 






此处 { Lj } 表示 i 和 j 的无序对— 

定理 3,8* A! ^ sup tL , e #r inf e I(to)(e) 


证明为简单起见，若 
式得出 


(^ j ), 则记 /( e ) = 心〜力，由 Caiu:hy-Schwarz 不等 






吻 ii 


M 

w(e) 




这样，对于每/， 7 T (/) 二 0 且 7 T (/2) = 1，有 


S ~fj) 


Y, 


㈣ 


\^ J \ 




中 O 


{^} 


E 糊 e )W 


e 


a(e)w(e) 




< D{fJ) mpl{w)(e). 


□ 


(? 


从证明中可以看出，所使用的图结构是相当自然的，因为只有使& > 0的 
{ i : j } 才出现在 Didchlet 型 D (/，/) 中.但有例子表明这种图结构并非完全必要. 
当然,在实践中，关键在于选择 Me )}, 这对于无穷的 F 更显重要 + 下述变分公 
式是一例证. 

定理 3*9. 设 E : {0，1，2，… ' N}，N (■ od ' q u ^ ^ b { > 0 (0 ^ i ^ N - 1), 
Qi . i — 1 二 A > 且对其他的 i / 乂叫 = 0. 以 5 T 表一切严格增序列 


如•卜1 = at > 0 (1 < K 且对其他的 i /么叫 

(叫)，斯 >0的全体并定义 
1=0 


入 ㈣ 


- Wi ) A 


■ 

PjWj ， i) N 


i +1 
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其中 


帅二 l，"n = k 、 … b n _ifa' -a n , 1 


那么」 1 】在，) 


证明 a ) 回顾分布 ㈤ 由％ = m / fi , /x := ^ ^ { 0 ^ i ^ iV ) 所决定，以 q 表 

j ES (} 

边 {m + I }^ 显然，对于每一对 i < j ; 存在 唯一 "的路(无圈)，它由 A ， A +] ，…> ~-1 

构成.取 ^( ei ) 匕則 + i —肌■则 |7^ Su ? = ( Wjfc+i 〜扣 fc ) + * 『 ■ + (^^_ t ^- i ) = — 

这样， 


I 


^2 hkelv-^k^e = 5 Z 7Tfc7T〆 卿 - 叫 ) 


{ ks £)' 


k=Oi^i+l 


i 


fc=0 f=i+l f=t+l 


L 


i 


N 


itewe - 


i 十 1 


fc=t41 } t^i+1 A=0 £=t+l 


A =0 


HI 


=— 

^=- i-hl 

N 

^ I ㈣ ， 

^=1+1 


S ^ 1>购 

A ： =iH-l / \£—0 




由定理 3.8, 证得把 “=” 换成的断言 . 

为证明等式成立，则要用到特征函数的一些性质,因而要困难得多. 


性质1设 A >0 及9笋0是方程 f?p 


XQ 的解-则卯參0且 


^n^n{3n^l ~ Qn) 


€ W 


Q ^ n ^ N . 


(3-4) 


此处约定 〜= 0如 IV < oc , 

证明约定 a 0 = 0及 a N+x = 0如 JV < oo . 
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(3.4) 式由下式导出. 


n 


n 


n 


A ^ i 9 i = ^ ^9{ i ) = X ] (^^(^-1 ~9 i ) + 霄 A (免 +1 ~9i) 

1=0 i =0 t 


0 


n 


^ [- 霄 A (A - 9i~l ) + - 9i)] 


r*0 


— ^O a o(jkl - f/-l) + % 1 + 1 〜+ 1( 如十 1 — 9n) 

^ n ^ n {9 n +\ 9 n )- 


由于 < i 0 = 0, p 


1 


项可略去. 


ii ) 若如 =1 则由归纳法及 （9.2) 式 导出仍 = 0. 这与假设相悖. 


□ 


性质 2 设 Ai > 0 而 3 是方程珣= -Mg 的解， 满足如 < 0, 则 3 严格单调上 
升- 

证明为方便，置如= 0及 fcN = 0 ( 如 JV < DO ). 由所设条件及性质1知 fh >机 
今假定存在某 n , 1 ^ n ^ A r - 1使得 


ffO < &1 < ■ < ffn-l < 9n ^ 9n+l- 


(3 」 5) 


我们证明这是不可能发生的. 

由 （3.4) 得办 < (相应地 =) g k ^ 

置 h 二 由江4)得出 

1=0 


k 


乙7^<(相应地 =)0,0 S 々 d ] 




k 


9 k < (相应地 =) 糾 i ^2 ^ < (相应地二 ） ()■ 


ti 


由此及 （3.4) 和 （3.5) 导出 


X] Afii + ^n9n ^ 

i^n-1 


9n (^r*. — g n -l) — T^iOrt ™ 9n - ] } > ^ 

Al7T n 入 i 


取 9 i = ■则有 


Y , 


N 






jV 
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N 


- X ] nt9t + 如 二 Jm ^ - ^ n 9 n - 

i 1 t-n i^n 


(3 .… 


(3.7) 


(由 （3. e )) 
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从而 




N 


I 


Yi+9iY,^ 


又 ■■气 

9-2^ 


A 一 


t^n-1 


其次, 


= ^1 XI ^ + ^ri^g^idn - S^-l) 


i^n 


〉 : A3? + 入 1 开 n 殳 nffn. 


(由 (3J)) 


i^n-1 


现在证明 


^ _ 

^ n 9 n 9 n < 


^5： 




由（: i.7) 知, 如 > 0,因而 (3.10) 等价于 


m 


(3.9) 


(: U0) 


9n 


!> 


_ 




t=^n 


9n 

3n 


或 


〉: ~ ^n 


t=n 


9n 

dn 


j >「4 


t=n 


9n 


后一不等式成立是因为0 < 心 S 如, 0 < E 〜_ 7 r n g n / g n ^ A < 1. 这证得 

t=n i=n 十 1 

(3,10). 综合 （IS) — (110) 得 


嘲⑴ 


入 1 ( 


E - (E ^iSi 


^1 ^9i + ^I^n9n9n 

i ^ n -\ 


i^n-l i=n 


N 

ffn ^ TTi 


< Ai 


• 

^ n 9 n 


i=n 


导致矛盾， □ 

现在，我们回到定理 3.9 的证明.如 At 二 0,则前面的证明 a) 己表明等号必 
须成立.以下总假定 Ai >0, 

b ) 由性质2,可定义正数数列叫=切 +i 〜免，0 < i < iV _ 1. 为方便计，补 


定义 t^ = l. 那么，由特征方程 


Ai_g 得出 


biUi — atUt-i ― 一 入 1 沾 ( a o : = 0 )， 0 矣 i < iV — 1, 


(3-li) 
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以/ + 1代替 i 得出另一等式+两等式相减得出 


Ri(u) {a i+ iu t - - a i u i - 1 + biUi)/ui ~ Ai > 0, 


N -1. 


由 （ 34) 及性质 2 知，存在有限极限 c := lin ^ fi n b n ^n ^ 0, 倘若 /V = co . 否则 
o = ( X 约定= a 由 (3.11)^^ 的单调增性质,我们有 


a 由 （ 3.11) 及&的单调增性质,我们有 


t^nbn^n =- 久\^^隱 S 一 fh9 

4=0 i ^ n ： g ^<0 


< ^ ^ ^ -Aiffo^ < oo 


i ^ n：gi <0 


从而 C < OO , 进一步 0 £ L ^ tt ). 


命 


w 


屮叫 _ 】 —Vi, + c/(ti - fio) = Xi9i +c/{fi - 肿），则 


(叫 +1 _ — Ri {^) — Ai > 0, 

可见％ 严 格单调上升，另一方面，由于 


O ^ i^N 


(3.12) 


L _ J _ 

E = S W-i - ih^h + Qij/Ui — /i 0 )J 


i+1 


jW+1 


_ 

V! [/ij^ifrj-iWj_i - fijbjUj + cfi 3 /(ti - ㈣)] 


J=t+1 


flihiUi - c + C /ij 


0 ^ ^ A" - L (3.13) 


特别地 T 52 t l j^j = > 0 且 Uf G X l (7 r ). 现在，我们断言 E > 0 对 

j^\ j=i^\ 

于一切 o ^ 2 s iV-l 成立.事实上 ，如叫 > 0, 则由切 的单调性知所述结论已真. 

N N t 

否则，< 0 ? n ，…，切1 <❶，从而更有 E - Y 1 内切 j - [ ih w j > 

j=Hl j-J j=\ 

0. 再由切 0 = -boUQ + c/("- ㈣ ）知， Y^j w j = ^0 + E > o. 


因此 T wesr . 综合以上事实得出 




bifiiRi(u)u^ / ^ iijWj > Ri{u) = Ai, 


(3.14) 


j>i+i 


进而 inf > Ai ， 由此及己证的 a) 得出 inf Ii{w)~ l = 

O^i^N - ! O ^ i^N — 1 

式可以达到.此时 , （ 3.14) 进而 (3.13) 中的等号必定成立.这推出 c = 0. 


A ls 即等 

□ 
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同时，我们还证出如下 结果： 

性质3对于性质2所绐出的 a 我们有 7 T ⑷二 0. 

作为与指数遍历性的比较,我们有如下结果，其证明从略. 

定理 3.10. 对于可逆马氏链，指数遍历速度等于谱隙. 

现在，转入讨论一般 Markov 链的 Dirichlet 特征值.固定一点，例如I) € 
那么， Dirichlet 特征值定义 为〜二 inf{D(/，/) : /⑼= 0且 tt (/ 2 ) = 1}. 对于每 
一 iGE ， 选一条从0到 i 的路（无圈 ） 选一定义在边上的正的权函数 

并命 kk = 比 ㈤ ， 

7(w)(e) = ^ eke } ^ l7 “ 

i: 

_ 

定理 3. H* Ao 彡 sup inf/(u 1 )^} -1 . 

4ji 6 


证明 



2 


i e€^i 


m 2 

w { e ) 


e 


^ D{J' f] sup/(uO(e). □ 

定理 m ■设 （％ 咕（川)， ( I ^ w )} 如定理 3.9 但改命，为一切满足叫= 0 
的严格增系列 ( wi ). 那么 sup inf L ( w ) 一 K 

o 批 n-i 

当心 = 0 时，若改定义 


八 Oi + lAi+l( W i+l - Wi) 

此处 h = 1, /in = h 1 -^ b n ^ 1 / a 1 -^ a n , n ^ 2, 则断言亦真. 

证明 a ) 依然设 G 为边 { i,i + l }. 对于每一 i > 1，存在一条路，它由，…， 

^t-i 构成，取= 叫 +1 - 叫则 

N N 

XI h ^ k.M = ( w k - w 0 ) ir k = 貫 km , 

k: 3e x jfc=i+I jfc^t+1 


现在， 由定理 3,11 即得 





第三韋可逆马氏链 


b) 本定理通明的佘下部分类似于定理3+9证明的第二部分.为完整起见，依 
然给出 细节. 设、> 0且 p _ 0,如二0为方程 Qg {{) - ^\ 09t 的一 

个解.此处,约定％二0及= (1 证明等式的关键是说明的严格单调性. 
一旦证出这一点,不先一般性，可假定& 了 7 然后有 


A(9) 二 -一 .~ — ^一-^ 〉 

叫 +lMi+l ( 识 +1 — 9i) 




m 


对于一切 o s 1 s w 〜1成立，因而得出所需断言 

c) 为证 （3.15) 成立，先® 


入0 


(3.15) 


入 D 〉: ^i9i ^ ^nH-l^n-1-l [ffn^l ~ 9n) ~ ^1^151 > 


I ^ N 


(: UG) 


(此处约定= 0倘若 iv < oo}， 这很容易 证出: 


P • P ^ _ p 

Ag ^ = y2^t^9{i) - Yl 1) + _(gi+! - sy)1 


1 


\ 




^ [ — 冗 ( 沒 j - 如一 l) + TTi+it/i+i (仿 — gi)] 


1 




^n-i-l^n+1 (^rt+l 9n) ~ 1 


由此出发,使用假设条件 & I 并仿照定理 3.9 的证明 b) T 可证出 


〜 + 】 如 +l (5n+l 一 ffn) = ()■ 


综合此式与 <U6) 得出作15)/ 

d) 现在回过头来诬明 A 0 的特征函数(讲）的严格单调性1由 (3.16) 知& 一 
0. 否则由数学归纳法导出^ - 0 T i ^ 1. 这样，可假定> 0. 今假定有 


某个 rt : I K n K N - 1 使得0 ^ 90 < 91 < 

9i ~ 免 ’ 卜 <n] + 


b I I 


< 9rt-l ^ 9n ^ 5n-fl H 定乂 


Y 1 


Y, ^ 5 ? + 9 2 n^2 ni 


i ^ n-l 




1 


i ^ n -1 


注意到 


入 Gtfn = — fifl{tl) ~ fen(ffn — Sn+1) + (5n 一？ n-1) > fl rt(5n — 9n—l )， 


有 


§3.3 附录： 可逆马氏链的请表示 


•87 - 


^ n^nSnidn ~ Sn - l ) ^ 



因此, 


K 胸⑹ A 0 


Ao ^ 


l 


Xw ^i9j ^n a n9n{9n ^ 9n 

^ n — 1 




N 


< Ao , 


t 


E ^i 9 i+ 9 l E ^ 

i ^ n -1 i=n 


导致矛盾. 

e ) 至于定理的末项断言，只需留意在上述证明 a )- d ) 中，并未用到仰（注 
意30 = 0 ) 和 V 此夕卜，原来的 A ㈣ 关于（川）齐次. □ 


§3.3 附录：可逆马氏链的谱表示 

设 ( pM ) 为可逆马氏链，即存在概率测度 （A : i £ 的使得 

冗 = 方 (3.17) 

对于一切和0 0成立，由此导出 

^iQtj ~ (3*18) 

当 Q 过程唯一时， #17) 和 (3.1 S ) 等价.因为己有测度(％)在手 T 自然考虑实 
平方可积函数的全体所构成的空间 L 2 ( tt ). 不难证明 (3.17) 等价于 

(3*19) 

对一切 /，3 e L 2 ( tt ) 和 * > 0成立，此处为 L 2 ( n ) 中的通常内积而 P ⑷= 

(叫 ⑴).换言之，是 I 2 ( tt ) 中的自共轭算子（如同有限维空间中的对称矩 
阵).对子马氏链,容易验证 P ⑴在 L 2 ( tt ) 中强 连续： 

|| P ⑴ / — /|卜0，当 hO ， 

此处 IM 表 L 2 ( tt ) 中的以 范数.尸⑴还是强压 缩的： || P {()/|| < | S /|| 对于_切 
t 成立.以 i 表 P ⑷在 L 2 ( tt ) 中的強无穷小算子. 

定理&13 ( 请表示定理). P ⑴与 i 有如下表示： 

fOO rOO 

P ( t )= / e ' Xt dE x , L = / - XdE x ^ (3.20) 

Jo Jo 
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其中 { E x . X ^ 0} 是一族上的单调上升的射影值测度，即 EuHE 一 
1( 恒等算子)， = E k , E x E ^ = E ^ E X = 旦对于每 
一/ e i 2 (7 T ), 关于 变元夂 批入）:二（五 X /，/)是 [0,00) 上的有限測度 ■ 


详言之^例如 （ 3.20) 的第一式意指 

rOO 

(P(t)f,g)= / e^d(E^g ), 广 wL 3 (tt). 

JO 

此处 

(AA ff ) ^ [吣 (/ + 札 / + 分) - ㈨ (/- 办 / 1)] ■ 

这样，对于固定的/ 和仏 ( E x f 7 g ) 是 [0, oo ) 上的符号测度 - 

此定理乃谱理论的基本结果但初学者不易理解.本附录的目的是力图解释 
如何导出 (3.20). 在讨论此问题之前，让我们给出 （ 3.20) 的一条简单推论 T 留意 
当 t 下降时, （1 - 6-^)^ = ^ j ^ e -^ s 上升，极限 

^ 某 P (/，/ K + oo , 当 f !0 (3.21) 


总存在. (3.21) 式的右方称为过程尸⑷的 狄氏型 （ Diridilet 型)+如不使用谱理 
论（即沭20)式),我们不知道如何逝明 （3.21) 式所示的上升性质 . 

当然，我们从最简单的情形开始.设 S 为有限集.此时,过程 P ⑴唯一并 


有如下简单 表示: 


P { t ) = e *° - 



a ) 无妨设 E ={0 山2，. ■ ■，#}■* (3,17} 得 


(/ — P ( t ) f , f ) = \ Y , 


由此及 （ 3.21) 得到 


mf) = l E = (_"，/) (3-22) 

i.jeE 

对于一切 / e I 2 ( tt ) 成立. 

b ) 由 (3,22) 可見算子 - i 正定. 换言之， ( n igij ) 为一正定矩阵 ■ 

回忆在二次型或二次曲面的研究中，我们总是将它化为标准型，为此，我们 
引进 记号： 


n = diag (7 r 0 (具有对角线元素 7 T , 的对角矩阵)， 

I = (fi) ( 列向童 )- 


胂.3 附录：可逆马氏链的谱表示 


注意 nQ 二 yn ， 由 （ 3.22) 得 

(- Lfj ) = -rnQf = (因为 l = q ) 

= -(n^Vj^n^^gn- 1 ^)^ 1 ^/) (3.23) 

二 -(n^ 2 /J*^(n i/2 /)- 

由 


a* = (u x/ 2 qu- 1/2 y = n -^ 2 g + n ^ 3 = rr 

= n 1/2 gir 1/2 二 a 

可见 4 对称.于是存在正交 矩阵! 7 使得 


(3.24) 


-(7Af/*=<iiag(A0 ， 

而0 ( 心矣 Al € ■ ■ ■ <入 AT 为 -A 的特征值. 

0) 往证>1与 Q 有相同的特征值.这可由下式看出 

Af = pf ^ n l ^ QU - l ^ f^pf 

㈣ QU~ 1/2 f = pU ~ 1/2 f . 

现在，由 Q 1 = 0 = 0 • 1得出、= 0. 实际上，对于紧空间情形 Ai > ( X 称差 
A ! ™ A 0 ^ A ； 为算子 L 的谱隙.它即是前面所定义的 gap ⑼. 
d ) 由 0.23) 和 （3.24) 得出 

(-[/，/) = -(n" 2 /)M(n" 2 / 卜 （nW/Wdiag ⑻ [/(n 1 "/) 

N (3 25) 

= (n" 2 m *' 


现在进入关键的一步.定义在点\具有负荷 a := ( un ^ 2 f ) 2 k 认= m ， …， AO 
的有限测度巧 ㈣ ).则 (3-25) 可改写为 

(―[/，/)- r \ Fj ( d \). 

Jo 

此积分形式对于无限空间是必要的.因为谱可能连续从而求和无意义.此时正交 
变换 t / 将改为所谓酉变换而算子 i 的定义域通常只是 L 2 M 的稠子集而非整 
个 L 2 (nl 

此外，我们有 

F/(|0,oo)) - - ^2(UU l/2 f)l = Yi^kfk = ll/il 2 - 

Jc— 0 k^O Jb=0 


(126) 
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这解释了我们之所以使用对称矩阵 j = u ] ^ qu -^ 2 而不用 nt ? 的原因.实际 
上,如使用后者，则得出 F f ([0,cc)) = ^：fl 这对于无限空间无意义， 

k 

e ) 其次，由于 Un^ 2 Q n U-^ 2 ir = 如同证明 (3.25) 那样，导 

出 

广 SO 

m (-^} n F f (dxi 

Jo 

由 d ). 此式当 n = 0 时亦真.结合此式与前面的讨论（于目前情况， L 二 Q ) ，我们 
得到 

poo 

[F(t)f，f}= e- Xt F f (dX). (3.27) 

Jo 

n 最后，由知 F /( i 0, oo )) - \\ff < oc ■由 (3.27) 的启发，自然定义 
测度值双线性型 (E x f,g) 如次. 

d{E x fJ) ^F f (d\) } (!0, oc ) 上的测度） 

：= \ [(E x (f + g )J + 9 )-( E x (f-. 9) j- g) ] t (符号测度） 

简言之.对于每固定的/， (E x fJ) 是一测度而对于每一集 C s ^((0 ; oo )), 
j c d(E A f，g) 是关于/和没的双线性型，称 : A > 0} 为算子 I 在 I，卞）上 
的谱族.这样,我们已经得到了 (3.20). 我们特别指出，对于无限空间，有可能发 
生对于某些/ e L 2 ^), /" Ad ^/ Jl ^ oo . 于是我们需要小心对待算子 i 的 
定义域< 无论如何，有界算子情形依然是本质的，因为无界情形可化为有界情形. 
即上述定理也适用于无界算子. 


§3,4补充与习题 

1. 设可逆马氏链户⑴= (Pijft)) 具有平稳分布 7 T , 则 lim = 7T y 

2 . 固定定义 y ; = x r _ t ，则 

(Yt)o^ K T 是马 氏链； 

( b ) (Y t ) 0 ^ T 具有齐次的转移概率矩阵当且仅当 (^ t }^ 0 还是平稳的，即 
过程的分布叫= q 与 f 无关. 此时 (Y t )^ T 的转移概 
率矩阵为 p 匕 ( t ) = tnjPji ( t )/ mi . 

3. 证明生灭过程是可配称的，给出配称测度+并由此得到正常返的充要条件， 
4* 由向前方程和向后方程有相同的最小非负解来证明定理3丄 

5. 证明在 （3,25) 中， （即的乃⑼= 
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6. 设£ = {0，1，… ， iV }， 则 

% 

( b ) ( P ( t ) fj )- ( E ^/ i ) 2 < e - A ^( ll / lf - 

I • 

7. 利用定理 3.9 给出下面的生灭过程的 & —个 “好的" 估计. 

( a ) a { = a } hi — b . 

ai = a,bi — h/(i + 1). 

( c ) ai = Si , ~ = ai + /? i ， 其中 S > p . 

_ 

8. 设连续时间马氏链户⑺具有平稳分布 TT ， 若] im sup E ⑴ -TTjl = on 

i j 

称 P ⑷强遍历.证明若 P (0 强遍历，则存在 C < 00, e > 0,使得 

sup VjPij (0 -^ji < Ce ~^. 

j 

可考虑如下的证明思路. 

( a ) 定义少 ( f )= isup ^| pij ( t ) -7 T 儿则州 ） S l , 4 >(t + s ) ^< p { t )< p { a ). 

2 t j 

( b ) 定义： r = inf{G 0 :州 K r 1 }， 则帅 K 州 V 邛 K 


设 （ P*J ⑴）关于 TT 吋逆.对 HcE ， 令元 = %/(l — 钐 H , 

那么 [P(t)f、gh 二 W 的 !‘ 

10 ■诬明 (3 + 17) 等价于 (3.19), (3.18) 等价于 ( L / j ) = { f , L g y 

11. 如果 gap ( i ?) > 0, 则马氏链指数遍历 + 

12. 对正则的 Q 过程 Q =(叫),具有可逆测度 7 T ：= (7 T t ), 则 


gap(D) ^ inf 


E n i^ij 

n ( K )7 r ( K ^) 


: 0 < 7 T { iC ) < 


13. 


(a) 称 0 : [0,oo) — [O t oo) 是上可加函数，如果 V s，t > O T 0(,s + f) ^ 
< f >( s ) + 证明极限 ^ = lim < p { t)/t 存在且 (？ = mft>o < i >{ t )/ t . 

( b ) 令 

冲 ) = -—{bg || P 0)/||:7 T (/) =0，||/|| = 1}， 


W \ a ( t ) 为上可加函数,从而极限 a = 



2 - 
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14. 设可数空间五上的连续时间马氏链 P ^(0 具有0矩阵 


- 1,2. 考虑 


乘积空间 J ? x £ 上的过程尸⑴=⑴)满足 P (⑴ ㈣ ⑴二 


(a) 证明 P ⑷ 为马氏链，并求出其 Q 矩阵 

㈤ 证明 gap ( Q ) - gap(Q ⑴） Agap(Q ⑺)， 

⑷相应 n 重乘积空间上情形如何？ 


15. 证明 


Ao ^ ^ 


^0 

兀0 


提示： 利用性质 Var(/) = tt(/ 2 )- 7 t(/) 5 = inf7r((/^c) 2 ) 

16 .令 （mj 和 （以 为非负序列 , 并满足 


_ ■ ^ v 

c := sup ^ Hj ^ mj < 00 


>0 ~0 


t-1 


则对任意 7 e (0,1 )， 有乙 < c(l - 7)-vr 1 ， 其中外 = E 〜 

1=0 


17. (Hardy 不等式）令 


Tt —) 1 OQ 


证明 广 1 < Ao ^ 5~\ 


提示： 在上题中取 


1/2,= lii.Ui = 可以得到下界估计，另一 


方面 ，在； ^的定义中取 


(i-l)A(n-l) 


U 


Y , 

7=0 




可以得到 A 0 O ' 


18,设^ r 为可数空间£上的符号测度，则 

( a ) il/xx 外 Var S ||^||var + l ! H | v ar ；{| l - jlvar 的定义见第二章题 32 ) 并由此 

证明 

( b ) (接题 S 和题 14) P ⑴强遍历当且仅当 pW ( f )(? = I , 2 )强遍历 ■ 


19+设 


3 1 


Q 


4 2 



证明其转移概率矩阵为 


P ⑴ 


2 + 3 e~ M 1 - e~ st 2 - 

2-2e_ 从 l+Ae~^ 2-2e^ 5t 

2 - 2 e _6t 1 — €~ 5t 2 + 


从而尸⑴的极限分布为 tt = (2/71/5,2/巧.且 




-e 




20,设 


Q 


-1 1 
0 -1 


证明其转移概率矩阵 P ⑴为 


111+ U~ 3i/2 R{t) 


其中/?⑴如次 


cos ( 丁） 

, 2; r 、 

cos(-- + —) 


也 t 2 tt \/Zt 2 n 

cos (. - ) f-0^( — + — 


cos (^) 


2 贯 

cos ( — 


^Vzt 2 tt , , 2 tt 、 
ycos (—- -) cos (了 + 了） 

从而 P ⑴的极限分布为 7 T = ( l /: U /3， l /3) ，且 


cos( 




f ,_3t/2 ^ 叫 pE lz~ ⑴ -M < 3 C 


-3t/2 
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§4.1 马氏性及其等价形式 

自本节开始，我们研究取值于一般状态空间的马氏过程. 

定义 4 丄称定义在概率空间上，取值于可渕空间 （兄 皮）中的随机 
过程为马氏过程 t 如下述马氏性 满足： 对于任何有限多个<^< 

P 队6卓… , X t J = P [ X.G 火 (4/1) 

回忆条件化的定义,对于任意的 

Ei / I ^^ Ef / l ^ i ^ f f / dP . 

J\ Ja 

本节的卜 J 的是导出 （4.1) 的各种等价形式.主要工具是测度论中的单调类定 

理 1 


命 ％ = {[^ t x € Ap … ： G 4*1 : 4 0 ^ tl < 1 2 < * < t n ^ 

i ： n > 1}, 它是生成"代数 〆 ^ := 0 ^(^ t ) = : s < f } 的 7 T 系*由 (41) 得出， 

对于每 Ber f ? 无妨设 B = p tl e 』 tl ，…， X tT1 e AJ , 我们有 

f P [ X u e ^ u | X t ldP ^ / P [ X 一 AH . . &， X t ]dP 

Jb Jb 

、… ， U f ]] 

= e [,[ a ■■认 叫- 

于是使用集合形式的单调类定理，得出 


f[X u e A u \J^ t ] = F[X v € A u \Xtlu>t 


(4+2) 
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然后使用函数形式的单调类定理,可将示性函数 I [ Xu € A ^ 换成关于 ) m \ 
的可积 函数： 

-則 X 丄 ^ 桃 I < 00. (4.； i ) 

上式中，只考虑了关于“将来”的一个时刻^随后我们将证明，把它换成有 
限多个 “将来 ”， 结论亦真. 

对于任意有限多个 t < m < ■- < u m 及枭 G K 

(4,4) 

lPl^ t €AjJ = h2 r - M^t}= = 1J ，… .mlXil- 

贼 我们仿照 （4.1) 4 (4.2) 4 (4,3) 的步骤，那里对 “ 过去”的事件逐 
步加以扩充,现在对“将来”的事件遂步加以 扩充. 命= |[ X Ul € A l 5 X u , £ 

乂2,… X Ufri £ A m ] : n m > —1 > … > t/i ^ t : Ak ^ m ^ 1}, ^ — o {^ ji ) - 

c ^{ X u : u ^ t }. 使用单调类定理导出 

P [ Bj ^ t ]=! P [ B | X t ], (4.5) 

进而 

-刚灿 $ e 〆 ， E |$ < oa (4.6) 

下面 7 我们需要用到乘积空间上可测函数的表现定理 . 





即是： 对于给定的从 ( a ^\ P ) 到 ( R ^( R )) 的可测映射$必定存在从 （£ ^气 

到 ( R ^ m 的可澜映射/，使得$是/和； f(t + ) 的复合了这样，由 
(4.(5) 得出 

E(/oX(t+)|^]-E[/ 0 X(t + ^X t l ， 

E|/oX(#+ )| <oc, (4,7) 

_ 

今设 （e A 使得 （， r ? 和以 均可积，则 

nO )\ Xt ] - E [ E |0?， t ]| 不卜 E [7? E [^^ lj^l 

(由 (4.7)) (4-8) 

= E^|X t ]K[^|. 
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{)7 ^ 


此式的优点在于“过去”和“将来”处于对称的地位. 
现在可陈述本节的主要定理+ 


定理 4 . 2 * (. 11 ) - ( 4 . 8 ) 相互等价 . 

证明我们己经证得 (4,1) (4.2) (4,3) 及 （4.4) ^ (4.5) (4.6) 

(4T) — > (4.8). 因而只霈再证 (4.3) => (44) 和 (4.8) ^ (41). 

(4.3) ^ (4.4) 使用归纳法，当 ni = 1时， （4.4) 即是 (4.3). 令出二 
4 f . 迅= | X U2 e … ： x Utu e A m }. Kd 

〖卜啊缺， Ul ， f ] :聲邱，…，] 

= E[^ ] PiS 2 1，\ Vl ]|^] (归纳假设） 

(4.S)) 


同样， 


= E[E 如 ljD J 广 =[!〜!? [丑 2 |^^]|. Y f ] 
^ E [ I El f \ B 2 \ X ^]\ X ^ 

(48) (4i) 由 (48) 得出 ^ E{rjE[^X t }\X t }. 这样：对子一切 

眾我们有 

[ ^ dP - / El 抓]此 

々 XiEAj J [A\.£^] 

特别軋 若取卜 I [ X ^ A tr] .^ 儿小则 


^[^ti ^ -A]：' ■ ■ : X tjv 6 A n ,X t € A T JV“ ， 6 人 j 

二 1 ㈣ 二 f nx tit e ^ i ^.]. 

J 々 Xq Ej 4 i ， … , Xt TS € j 4 Ti ^- Y (€* 4 ] 

此即是 （4.1). □ 

若对状态空间 ( E ^) 施 加一点限制，以保证正则条 件概率 存在,则马氏过程 
必定有转移 概率. 换言之， n x t ^ 有正则修正 pis.x J . A ), 它是转移 概率， 

以下假定 f 包含一切单 点集忖 h R 

定义 4.3. 称四元函数此 vdAOsgOjeKAef ) 为转移函数 ， 如果 

(1) 对固定的 VT〆 ， 它关于4是爹上的概率 测度： 

(2) 对固定的木它关于 i 是寥可测 函数； 

(3) p { s , x ; s ,{ x }) = 1; 


■ 98 - 


第四章一般马氏过程 


⑷它满足 Chapman-Kolmogorov 方程：对任意的 

p{s,x\u } A) = / pis.x ； t,dy)p(t,y\u,A). 

Je 

称之为时齐的，如果 p(s,x\t,A) =p(t -s,x,A). 

对于给定的马氏过程，记巧 (/I) = P|X t e 则由马氏性及归纳法易证它 

的有限维分布由下式给出 . 

对于任意有限多个 0 = 紿 < h < ■ ■ ■ < 匕及瓜 e f ， 

PjX 4 € 丄 ）=1，…， nj = / Pt 0 (dxo) f pito.^h.dXi) X 

J J Ai 

I p(t 1 > »^l j ^2i ^^ 2 ) ' ' ' / 1 j l! ^n ： ) - (4^9) 

Ja 2 JA n 

等价地 ( 可使用单调类定理证之 ) ，对于任何 n 元非负可测函数/，有 

… = j J p 、 t D 、 x Q 'tudxx} j p{ti,xut 2 ,dx 2 ) 

- ■ Jp(t7i^l^n-l\t n ,dx n )f(xq } x 1 ^^ ' s (4.10} 

反之，对于给定的初分布几和转移概率 p(s^x ； t,Al 若一随机过程的有限 
维分布满足 （ 4.9), 则它必定是马氏的 . 换 言之， 马氏过程由初分布与转移概率完 
全决定 . 

下面给出取值于实直线 R 的一些马氏过程的例子 . 

例 4.4 ( 标准布朗运动).转移概率密度是离 斯核： 

— 士哪 

它满足热方程 d^fdt^ ^/dx 2 . 即对应于拉氏算子去这里使用黴分算子 
代替离散空间的 0 矩阵 . 

例 4.5 ( 带漂移的布朗运动).转移概率密度是： 

对应于向后方程 dp/dt = ^a 2 d 2 p/dx 2 + ftdp/dx* 

例 4 ,6 ( Oriustein - Uhlenbeck 过程，简称 0* lL 过程) • 转移概率密度是： 

PiU^^y) = f(cr 2 (l ™ e~ 2ai )/(2a),xe~ a \y). 

对应于向后方程 dp/dt = 、 <j 2 d 2 pldx 2 -axdp/dx. 


. 2 t 



这些过程均可配称，而 0. U . 过程关于正态分布可逆， 
连续时间马氏链的直接推广是如下的 


例4. 7 (銚过 程). 状态空间为 （尾 爹). 假定才包含一切单点集.代替 Q 矩 
阵，使用^ 对 其中 gCT ， dy ) 是非负可測核为可测函数使 
得 \ 卩}) S g (; t ) S oo . 全稳定、保守意指： g ⑷=< 

00, g E . 所谓跳 过程， 乃是一转移概率 p ( t , xAy ), 满足跳 条件: 

= l , VrG 及这样，与离散状态空间平行，可以展开一套理论.可参考 [5,10]^ 

本节的主要定理也适用于离散时间参数的马氏过程 (^)^ o - 作为例子，我 

们有 

例 4 . 8 (经济横 型). 以 Xn 表第 n 年产出的产综所构成的列 向董. 则（夂丄^ 
是取值于的马氏过程. 

§4.2 强马氏性 

本节讨论马氏过程理论中的一个核心 问题: 强马氏性1 
设 ( x t )^ o 是定义在概率空间上、取值于可测空间(: 尽雾） 中的 
随机过程.记 : = a ( X 3 , sKtl 称此过程为马氏过程,如它满足如下马氏性： 

E (/( X s + ,) l ^，]= E [/( X a + t )| X 5 ] =: E SjXs [ f ( X 9H )}, tOO . (4 J 1) 

换 言之， 在己知“现在”（一个固定时刻 s ) 的条件下，“将来”只依赖于“现在”而 
与“过去”无关< 假如我们要观测过程第一次达到 ( t ^) 某个状态或某个集合以 
后的发展行为,把这个首达时间 r 视为“现在'那么此后过程的发展是否也只 
依赖于“现在”及现在所处的状态 x T 而与过去无关，换言之，我们是否有 

E \ f ( X T+i )\^ T }^ E (/( X T + t )| X T j = E T > Xr [ f ( X T ^}l t ^ O . (4,12) 

留意了 是随机的.当然， （4.12) 比 (4.11) 广得多.我们把 (4.12) 称为强马氏性. 
在历史上，人们以为 （ m ) 是 (4 + 11) 的自然推论 . 一直到 SO 世纪 SO 年代有人举 
出反例之后，人们才对强马氏性引起足够的重视.这里有两个问题，首先. (4.12) 
对何种: T 能够成立？其次, cr 代数多 j 该如何定义？本节的目的是寻求这两个 
问题的解答.这两个概念极为重要,值得深入思考.下面介绍一神思路，可作为研 
究数学问题的一个小范例.现在，让我们考虑一种最基本的情况.即过程有时齐 
转移函数办).那么 


E ^ J /( X B + t )]^ E 0 l x ,(/(^)] -： E x ,[/( X 0]= / P(dd y )/ (办 
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因而马氏性 (4.11) 成为 




而 (4.12) 成为 


-卜 E Xt [/ ⑽ 


(4-13) 


先从简单的 T 开始 


_ 

r = E 心 


I _ 

^ Ai = Gi > (X 


此时， （4.13) 成立当且仅当 


， f ( X TH )^= f E XT f { X t ) d ^ A €^ t . 

A JA 


但由马氏性 


/ E AT /( X f )dP = ^J / E Xr /( X t )dP = V / E Xri J(X t )d]? 

=E/ mX a ^ W ai ] d ^ 

为把儿 4, 移入条件期望内，即使用条件期望的平滑性 T 需要 AA ^_ jr ar 倘若如 
此,我们就有 


n ^ n 

上式右方= [ /印灿 /( JdP = u / (心 

1=1 J i=l 


+i 


r n 

I a ^ aJ ( X ^ 

_ i 一 i 




E[l A f{X T ^)} 



f ( Xr^)df 


A 


从而导出 （4.13). 这样， 为使 (4,13) 成立、只要 


▲4 e 夕、 


AAi ^ An[T = e ^ ai 


\/L 


(414) 


因为叉 r 是 a 代数， S! G 资 r . 在 (4.14) 中取 A = a 得出关于 T 的一个 条件: 


T = h ] e 


由于 r 是离散的，此条件等价于 | r 在 4 e ， ar 对于一般的 T \ 因为丨 T = M 
常是零概集，自然使用后一条件.即 [ T ^ t ]^ ^ 




定义 4 . 9 . 设： Til —[ o ，+ o 4 如果对于一切 00 ,有那么称 r 

是一个停时（或可选时，或不依栽于将来的随机变最). 

留意停时可取值 

定理 4 . 10 . 


(1) 常值时间是停时. 

(2) 若了是停时,则 r + t 也是 停时. 

⑶若 L 乃是停时，则也是停时. 

⑷若 L r 2 是停时，则 T , VT ? ^ Jnax ( r l 5 7 b} t T , AT , rmn { T l ? T ,} 也是 

停时. 

⑸若凡是停时 ， i„T r ， 则了也是停时 - 
(6) 若 r 是停时，命 






久，；1) 


k + 




则 r Tl 也是停时^且？;^!^. 


证明我们只证 （ 6 ). 对于每一个 t G [ 0 : oo ), 我们有 






k :{ k +\)/2^0 




但 


- <T ^ ™2 n 






所以 [ T n ^ t ]€^ 


□ 


注 4 . 11 . 対于给定的 r ， 通常的简单随机变量逼近系列取为 


n 2 n 


T n 


知二0 


y n /[ fc /2^ r <( fc + n />-] 


nliT 


【 r=.xjj 


我们有瓦丨: T 但 


[ f n ^ *] 


L^t 2 n 


fc /2 n ^t 


2 n 


E h^lnh^l c 


k/^^t 


2, 


此集一般不属于这表明：对于一般的停时，未必能从左方逼近. 
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现在来讨论我们的第二个问题:如何定义实际上.在 （ U 4) 中，我们 
己经看到， t 中的元素乂应满足 条件: 对于一切 ^ J 4 ntr = fll ]e ^而这等 
价于4 n [T s %] e 少 r 对于一切 i 成立.对于一般的（未必离散） 情形， 自然应 
定义 

定义 4.12. 称 对于一切 ZnlTgf ] e ， t } 为 r 前 

c 代数. 

下述性质表明不会太小，它已满足我们的一个基本要求. 

引理 4*13, T £ ^ T . 

证明对于每个 s ， f 会0 : 我们有 

[T ^ s] 0 jT ^ tj = [T ^ t A 3 ] 6 ^tAs ^ ^t- 

因而对于每一个 A [T ^ 口 

前面我们已经就简单的停时证明了强马氏性 (4.13). 对于一般的停时，自然 

希望用简单停时来逼近. 

先看 （4.13) 的左方.我们希望 

E [ f ( X T ^ t )\^ Tn ]^ E [ f { X T ^ Wr ], 当 n — 00 . 

暂且忘掉条件化1叉 T ，， 并固定^容易看出，这要求和/具有某种连续性. 
至少两者都连续时应该是有希望的.能不能再减弱一些呢？关于广假定它有界 
连续已经足够.因为若 (4.13) 对于这种/成立,那么，由单调类定理， （4.13) 对 
于一切的有界可测函数也成立.关于 x t , 由于 r n 丨 r ， 只要 x t 右连续、就有 

AV T6 +t — XT + t - 

再看 {413} 的右方.画定我们要求 

Ex Tn [/(A)] — E XT if(X t )]， 当 n — 00 ， feC b , 

此处 G 表示一切有界连续函数的全体.这要求 E x f(X t ) 关于 t 连续.但 

E ^/( X t ) = j f{y)p(t : x,dy) =： P{t)f(x). 

于是，上述条件可改 说成： 对于一切的/ e P ⑴/化）关于^连续（必然有界). 

定义 4-14. 设（闊 是一个距离可_空间.称转 移函数 phiA ) 是一个 
ftelter 转移函败，如果对于每一个 fec b (一切有 界连续函数的 全体）和每一 
个 P(t)f € 具 有这样 的转移函数的 马氏过程称为 Filler 过程. 




H 2 强马氏性 
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定义 4.15. 称齐次马氏过程闪）是强马氏过程，如杲 

(1) 对于每一个停时 

(2) 对于每一个上有界可測函数的全体， 

E \ f ( X T ^)\^ T } = E XT [ f { X ,)} - P ( t ) f ( X T ), 0 0， (4.15) 

此处 x T (^) = x T ( u ) { u；y 

留意当 r = oc 时,1^无定义.因此，凡出现 x T 时，总理解为 x T i [T< ^. 

现在，我们可以陈述本节的主要定理. 

定理 4.16. 右连续 Feller 过程是强马氏过程. 

证明 a) 我们先证明可 测性： X r e ^ T . 首先 } 我们 证明： 限于 [T S f] 上， 
(7») 是 （R^ t ) 到的可测映射，事实上，对于每 
一个 和 

[{ Ti ^^ r^B X A)] n[rgfj = [ TKt ] r \ T ^ l { B ) nAeJ r t ， 

其次，我们将在下述引理 4 .1 S 中 钲明： X t ( u ) 是从 ([0 ^)x Q ^[0, t)x 
到 ( E ^) 的可测映射.这样，限于 F < t ]， 作为 （ r (^)， o ;) 和 X ( Lo ;) 的复合 

映射 

执义） —（[ m ) x a 龙 [( U ) x A )— 财)、 

当然也是可测的. 
b ) 再证 以 15) .取 


Tn 


^fc + l r r 

2_^ —^r 〜 /2 Tt <a^(fc+l)/2-] + 00/fT 
Jt -0 


]■ 


MT n 是停时，且 7 U 7\ 为证 （4 J 5), 固定 / e a 只需证对每一个 AeJ ^ 
有 

f E ( f { X T ^ t )\^ T ) d ¥^ f P ( t ) f ( X T ) d ]?. 

Ja Ja 

即 

I /( X T + t ) dP - / P ( t ) f { X T )^ 

Ja Ja 
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由的右连续性和 Fdler 性，我们有 


⑴肌博 = ⑴版， 


Um > / P(t)f[ X^i dP 


OO 


lim > / E / 

H°° fc=r0 /^n{^ r <T<^r 1 } L 


X l 

2 n r '•* 


dP 


(由马氏性) 


lim 





fc =0 



^4 1 


dP 


A & 


n{ 




r }^L A <以 W } ’ (~ 

fe — 0 


+* 


dP 


d ? 


ii „, y / fe + t ) dp = y /( x T4t ME □ 


定义 4.17 •称 （ A ) 是适应的，如果对于每一个 t > 0 , X t G 称过程 （XJ 
是循序可测的，如果对于每一个*>0,它是从（咏 () x 0, 龙 10, Ox，d 到 (£, r ) 
的可测映射. 

引理 4.18. 右连续适应过程是循序可 测的- 


证明只需考虑如下 逼近: 


2 K 


x [ s n) 


fe^il 




§4.3 附录： 最优停止问题——女秘书问题 

本节通过一个具体问题来说明停时的重要性。 

一个经理要从 A 「 个姑娘中雇佣一名秘书.每次他会见一位姑娘+见面之后 
就决定是否录用该姑娘，在拒绝了一位之后，就不再召见她了.经理根据当前所 
见的姑娘与之前所见到的相比较的排名情况来决定是否录用她.当然,对子尚未 
见到的姑娘的情况他毫无所知.问题是经理该如何做，使得他选中这 AT 位姑娘 
中最好的一位的概率最大？ 


§4,3 附录：最优停止问题 


女秘 书问羅 
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把 W 个姑娘的综合评分依名次排列为 fl := { h 2^ ^ N }. 取0所有的排 


列（叫， 


心，… 


,^ n )， P [( wi ， 叫… > ojat )] = 1/ AM , ^ = Q 的一切子集的全体.再记 


= 它表示第 n 个被接见者在前71个被召见者中的相对名 

次 : f ^ criY m ： m ^ n }, 它表示至第 n 次接见时的全部信息.于是，问题 化为: 


寻求关于 (^ n ) 的停时 P ， 使得 f ； := P [^ T . 


max { P [ o； T = 1] : T 为停时 }. 


然而， 一 般的停时可能太复杂而并不实用.因此，我们限于如下一类停时: 
T r = min{n ^ r : y n = 1}, 它表示从第 r 次及之后召见时首次找到最优秀者的 
时刻 T 我们的目的是要寻找 r •使得斗;^ = 1] - - 1]. 


浅意… ，仏相 互独立 , PK 


F { w n ^ \ \ Y n 


1/凡而 

如 >；会2 


0 5 如乙 
n / N , 如匕 


于是有 


F[u 


T t 


^ F [ u^ n = l , T r = n 


• _ 

E 


E P K = l :>； = jr ， …上 - i = 允 - i ， K 




A _ 

£ 


Y , 則，…上 


Jti-i t Y n = 1] 


n=r jrf 


-PK =>，.-■ t V^-i = jn^l,Y n 


r • 

E 


n - 


r 十 1 


7 i-l n N 


t - 

~/v 


N 

E 


: p ( r ) 


由于 


jV-1 


^p(r)-^(r + l) = —f 1 - Y, 


沖) 在 f 处达到最大值: 


r * = r * ( N ) = inf{r ; ^?{ r ) — ( p(r + 1) ^ 0} 


inf 




使用积分代替求和，得出 lim N ^ 1 r *( N ) ^ e _1 . 

N — ►oo 

定理 m 当 N 充分大时，女秘书问超的最优解是 AAO/A^e- 1 & 0J7 
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§4.4 补充与习题 


1.设 n = {1,2,3}, ，为 n 的所有子集类， （ a 叉）上有概率测度 JPH =… 
令罗^ 7{{1，2}，{3}}: X ⑴二 I 则 x 是饵 炅） 到 (1^) 的随机变 t 但 

X 关于歹不可测+求出罗 1. 

2 - 证明定理 4 .10中的结论 （1) ( 5 ). 

3. 若了是停时，则 

4 •⑷若 r 是停时:证明少 T 是 (7 代数 ■ 

( b ) 当了三 t 时 ，多 V=;V 

( c ) 若停时则义 s c ， r . 

5+ 设 T U T, 为停时 r 则{乃 < TiUD > T 2 }: {A s r 2 } ， {7\ > r 2 } 以及 
{Ti =T2 } 都属于 f 7 1 ! n 多而且多 Vi n ^T 2 = 賞 TiATV 

6 ■证明 a - s - 

7. 离散时间马氏链是强马氏链. 

8. 设 ( X n )^ 0 为状态空间五上常返的马氏链.固定丑的子集 K 令 

7\ = inf{n ^0： X n £ F }, T^ +J = inf{n > T k : X n ^ F }, 

证明是 F 上的马氏链，并求其转移矩阵. 

9. ( Wald 等式）设 X '， X , 2 , … 为独立同分布的随机变童序列，且 ^jXil < oc * 
N 为一停时，贝 lj 

E{X,+ -+X N ) = E(N)E(X i )^ 

10. Q 过程具有强马氏性. 

11•考虑 Q 过程 { X t ) m r 令乃 = infft > 0 : = j }+ 记 

= Pt[rj 

则 f t f t 

Pij(t) = / Pyj(t - s^Fijis) ^ / Pij{t - s)dF jj {s). 

Ja Jo 

12 . 若 /( U ) 是 (t y x) 的可测函数，则 f(t } X(t^)) 为循序可测的 ■ 

13, 证明髙斯核 1 

1 f (y - x ) 2 

满足热方程 d^p/dt = \d 2 if/dx 2 . 


第二篇 

随机分析 





第五章鞅 


论 


§5,1定义及基本性质 

记 T 二{0义2，..} = 或 T = [0, oo ). 再记 T = Tu {+ oc } ■设 
为概率空间，为上升，域 流： 如 s 则 U t C JT 命少 oo = 

\j 采 t ' 二 ^{ u ^ O - 

t t 

定义 5.1. 称隨机变量 ( r . v .) 族 ( X t )^ T 适应，如 Vf G t 如再设 
V ^ T , 叉1可积且对^€*， 

傘， a . S . (5.1) 

则称 （ X ^ T 为鞅（上、下鞅)■称 ( X t ) t ^ 为闭鞅（闭上，下鞅) T 如果（卜1)成 
立且对 f e T , 

t] — (^i a ， s. (5,2) 

W 称为右闭元. 

简单地说,下鞅的条件平均值单调增. 

如为下鞅 : 则 (-叫 为上鞅.因此，关于上鞅的性质大多可由关于下 
鞅的性质对偶地得到.这样，以后常常只讨论下鞅 - 

引理5. 2 (简单性质). 

⑴鞅对线性运算 + a 2 xl 2 \ a } , a 2 e U ) 封亂 
⑵上（下）鞅对锥射运算 (^ (1) + a 2 X ( {3) lftl : a 2 ^0) 封闭. 

(3) 下鞅的上端为下鞅 ■ 

(4) 鞅的凸函数为 下鞅. 设 （ A ) 为鞅,/为 ® 上的凸函数;妁足）可积 
^ (/( 不 )) teT 为下鞅.外/⑷= a ^ l - 
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(5) 下鞅的非减凸函数为 下鞅. 设 （ A ) 为下鞅，/为 R 上的非减凸 函数 ; Vte 
T , /(%)可积4 ( f ( JC t )) teT 为下鞅■例：/ ㈤= C a 》1』》0; 

f ( x ) = ^ VO . 

证明 （4) 由凸性，< ^(/( xi ) + /( j ： 2 )) - —般地， /( E^O < 

E a J ( a )， 入 * 彡 °， E 夂 = 1 - 

i i 

/( X ,) - /( E [ X t |^ s ]) (由鞅性） 

^ E [/(^) i ^ fi ] (由凸性及 Jensen 不等式 )■ 

(5) 只需把上证第一个“=”改为 □ 

另证 （4) 使用条件期望的 Jensen 不等式.注意对任一 凸函数 我们有 

/ ㈤ — /( y ) 》 A ( y ) (卜 y )， 




此处 A 为右导数.因而 

/(X) - /(E[X| 安 ])> / ； (E[X|^])(X~ E[X|SH) 

E[/ ⑷阂 - /(IE[^1^1) ^ 0. 

但此处有一个可积性问题，以义/ 卩 代替及然后命 TV 丨 oo. 最后再取 
条 件化. □ 


§5.2 Doob 伴止定理 

如同把马氏性换成强马氏性那样，我们也期望把秩性换成“强鞅性'先看 
一简单 情形， 

引理 S . 3 •设 ( X n )^o 为鞅（下鞅)，叉了为有界伴时， S 则；^和可 

积且 

E[X t |^ 5 ] = (^)X S . 


§5.2 Doob 停止定理 
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证明 记 N . 二 supT (^)< oo . 则由 E \ X t \^ EH | 知 X 7 可既 以下只针对 

下鞅给出证明 . ^ n_1 

先假定 r - 5< i _ 若 a e 则= j ][ r-j + i ] -4[5 = t /][ r > 
j ] £ ^ j , 从而 

f dx s ) = YJ ⑷ - (由下缺性） 

h 卢 oM ㈣ 陶 

一 般情形 I 令巧 二 rA (5+ A ,? = ti:i ， 2，... I 贝 | J 巧均为停时川<^+] — 
flj ( 1， Rq = S 7 Rn — T . 由于 

^ ^ ^ j = l s …， A ' 

故由上面所证 

f X s = f X R ,^ [ X Rl f X R ~ 二 f X T . □ 

Ja Ja Ja Ja Ja 

定理 5*4 ( Doob 停止定理 ). &N = { m 〜} U {+ co }」 设 （ X n )„ ⑼为闭鞅 
(闭下鞅 ) T ^为停时 ，6 T $ T . 则 ^ ^和 X r 可积卫 

nx T \^ s \ = o ) x s . 

证明 a ) 先看鞅情形.对于任一停时艮由 

EjX/ii 二 [ i^ohEiXodcoc 

0( T ^ C!O [开 =n ] 

得出 X T 和 Xs 的可积性，倒数第二步用到鞅的绝对值为下鞅.但下鞅情形就不 
对了. 

任给则 

f x R = ^ f = f 

Ja G«oo JA 

可见二 E ^ l ^], 进而注意到 f s C ，则 

X s 二 [£[^1^1 = E [ E [^|^ t ]|^ s 1 - EjX T | jT s ]. 

b ) 往证下鞅情形 + 命 


r .- E [ X w |^ n ] - X n >0. 


易见 (^=£[^1^])^ 为鞅（这是由可积随机变量所生成的最简单的 鞅). 
由己证的 a ) 知,关于（仏）的 Doob 停止定理成立.因此，关于 ( X n ) n ^ 的停止 
定理等价于关于 { Vn )^(^ oo - V ^ n ) 的停止定理.但 { r n }^ 是非负上鞅 

且仏 = e^i^oo] - = o. 问题归结为对这个非负上秋证明 Doob 

停止定理. 首先, 对任一停时艮我们有 


y r - y ^ iRKoc ] + y^\R 




(&3) 


此处用到^ =0.因而 




lim Y RAn I {R<n] ) ^ E ( Iim Y R 

i—co 1 v \ n—►oo 


An 


^ Iim KY^An (由非负性使用 Fatou 引理） 

Tl—►OQ 

^ EY 0 < oo + (应用引理 5.3 于非负上鞅 （ K )) 

这表明 （1 < Eh < 00 , 从而 ：^ - - %可积.其次，命 T n = T A 

S n 二 Sf \ n 、 并设则由 A[S ^ n ] e 及引理 5.3 得 


u 叫咖 








从而 


f r T < / r s * 

A [ T ^ n ] JA [ B ^ n ] 


命 n Too , 由 （5+3) 得出 J A Yr ^ J A ys . □ 

推论 5 , 5 * 设（义‘找 + 为鞅（下鞅)， S，r 为伴时，则 E \ X r \ jr s ] = ⑵心， 
证明由定理5,4知， EfX T v 5 t ^ s 3 = 因而 

=+ ^ S ^[ T > S ] 




n 


推论 5,6 .设 （ X „)^ 0 为轶（下鞅)，则 （ X ^ T ) M 关于（，‘列是鞅（下轶) 


证明考虑 n s m . 因 { X k ) k ^ L 有右闭元，由推论 5.5 得出 

— ^nA(mAT) — 71 $ m. 口 



§5.3 基本不等式 
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§5.3 基本不等式 


先研究下鞅的极值分布的估计. 

定理 H 设仏 为 下鞅， A >0.则 


⑴ AP 




⑺气喷/“- A 

E|X n |; 


S — 


EX ^ + f[ min Xk> ^ 

L U^ fc^fi 


X n ^EX^EX 0 ^E|X 0 | + 


⑻ AF [ ra^JXfcl ^ A ] ^ 2 EX ^ - EX 0 ^ 2 E \ X n \ + E | Jf 0 |- 


证明记 X 


卜 o ? S> A 


T = 


> 斗令 


min {^ : < n , Xk > A ]; 


n 


如上面的集合 = 0 . 


则 r 为停时且 rgiz . 由于 


A[r = k \ = [ X j < X , Q ^ j < k , X k ^\]^^ 


^ A e ^ T , 


因此，对停时 r 和 n 使用 Doob 停止定理得出 



X n ^ Xr > AP ( A ), (因为在 A 上必有 Jfr > 入> 

A JA Ja 

龀即是⑴. 

将上述证明中对 n ， r 使用 Doob 停止定理 改为: 对 r ， 0使用 Doob 停止定 
理，类似来证明⑶-再令 A = [ min Xfc < - A ] 及 r = min {0 < k ^ n ： X k ^ 




若此集合空 




EXq ^ EX7 1 



=* Xt + I ^ 一 AP ( A ) + 

A J\‘ 



min 


X k >~k 


x n 


由⑴和 （2) 立即得出 （3). 


□ 


注 5 凡对于无限情形，定理的相应结论成立.例如上述的 （1) 成为 

AF [ max Xfc Al ^ sup EXj ". 

1 l ^ fc <{ X 3 n 

证明 由⑴得 AP [ max X fr ^ A ] ^ EX +. 由于当 n ]^^ X *= max X k t , 

L l^k^n J 

I \ yoo )( fn )^ ! ix ㈣ ( M 使用单调收敛定理得出 

AP [ max Xjt ^ A ] ^ aupEX ^. □ 

1 矣灸 <OQ n 
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推论5,9 (Kolmogorov 不等式)，设（义„)_ 为 It X n eL p {p^ 1), 即 

j ix n |p<oo, m si P ：=n ua= ( / ix n |py /p . 


则 Vn: 


max Xk\ ^ ^ 

.0< fc<n 1 


^ EiX n | p / A p ^ 


证明 （X n ) 是鞅 i {\X n \^) 是下鞅.然后应用定理 5.7. □ 

今设（义 n) 切独立同分布 (Ud f ), Vn, EX n = 0, < oc. 取多; ^ 二 a(X k : 

充 ■则 


nj =E[X] + . ■ ■ + Xn+1 |/ n 

二 & + E[X n +i|^ n ] 

^ S n + E [ X n + l ] (独立性) 
-5 n+ (零均值） 


所以 ， n ) 是轨进而 (j^! 2 ) 是下軚故 


F 


max 

- l ^ k^n 


| S fc |^ A ] ^ A - feJ . 


这是经典的 Kolmogorov 不等式 (1929). K. L . Clmng (钟幵莱）在他的教程 {[17]) 

中称它是一个卓越的不等式，它的早先的证明是概率论真正的精湛技巧的典范. 

鞅（上、下鞅）的重要性并不能完全归因于它是来源于实际的随机过程，换 
言之,并不在于它对实际的直接应用，而主要在于它的简明的特性,使之成为一种 
重要的理论研究工具.另一方面,从上例可以看出，如何由原先的随机过程 （Ud. 
(X n )) 找出某种鞅刻画^乃是应用的关键，以后还会谈到， 

下述结果给出非负下秩极大值的矩. 

定理 S .10 (Doob 不等式).设 ( X n ) n>0 为非负下鞅 t max ^再设^ 
为■上的右连续函数， W 0) = 0■则 




* 

/ n ^( A ) j f 
0 A 



特别地, 


ra P < < — p + E(Xn log + Zn )j 如 p 


如 1; 


此处 q 为 p 的共扼指数（即 1/p + l/q = 1), log ^x = log(e Vx). 


证明由 Fubini 定理及定理 5.7 的 （ 1} 知， 

Eip(X：) = f f d^(A)dP= r¥[X^X\d^(X) 

JnJ[o 9 xz\ Jo 

( 「 |d^(A) / X n dP 

Jo ^ 

「 〆： 1 1 _ 

=^EX n -d^(A) . (Fubini 定理） 

Jo 入 」 

今取 p(A) = (A-l ) + . 由于 

r x 1 f xvi 1 

/ +d(A_l).= / T dA = iog{Xvi)-log + X } 

JQ ^ Jj 入 

得出 

E(X； t -IK E[(X ； - 1) + ] ^ E[X n log + X；]. 

由初等不等式 

\ogx ^ x/e (i: > 0) a log + b^a log + a -h b/e 

( 当 b < 1 时此式平凡 . 若 6 > I 令 : r = 则后式由前式导出）得 

E[^ n log + X*K E|X n log + X n + X^/e], 

由此及前一式子得出定理的最后断言 . 最后，取二 AMP > 1) . 则由 Holder 
不等式有 

E[X； P ] < ^g(EX^) l/p (EX^) l/q . 

无妨设 ||X n || p < oo . 由于 (X*J n>0 依然是下鞅，从而 

n 

EX* P nEX^ < oo. 

fc=i 

因此 t 若 EX^ ^ 0, 则在前式两边同除以 [E(^)] 1/g , 即导出定理关于 p > 1 情 
形的断言 . 若 = 0, 则 EXP = 0, 从而不等式成为等式 . □ 


§5.4 收敛定 


下面，我们研究下鞅的收敛性.为此，先做点准备+ 
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回忆对于非随机情形，若实数列 {〜} 发散 ， 则 

Iim^ n < iioiXrt^ 

n 

从而存在 16 e R 使 

lim x n < a < b < lim j n . 
IT Tl 

由此 可见， 从小于眺到大于 & 无穷多次* 
详言之 ，命 

s\ = infjn ^ 0 : x n < a} 
ti = inf{n > si : x n > &} 

S 2 = wi{n > ti : x n < a} 


如 h < oo , 则从到扎彳: 列上穿 区间 ㈧ 6] 

一次.这样 , 数列 { x n } n ^ 发散/当且仅当{^}^ 0 上穿某区间 的次数等于 

无穷. 

今考虑下鞅 ( X n ) o ^ N , N 固定.我们要研究(义„)的“上窜下跳”次数.由 
于 {( X n - ay } o ^ 依然是下鞅,因此,我们可设（忍为非负下缺且只 
需考虑 a = 0的情形 . 命 

Si = min{n : iV > > 0, X n = 0 } f 

Ti = min{n : N Si , X Tl ^ fr} t 

■ 

_ 

_ 

Sk = min{n : iV ^ n ^ TVi , JV n = 0}, 

Tk = min{n : N X n ^ 6}. 

_ 

_ 

I 

如常，补定义 min { } = AT . 显然，若“上窜下跳”的次数埒( X /) =: j > 0,则 

{X^ - Xs^ + * ■■ + (X^ - XgJ 备 jb. 

此式对 J = 0亦对，因为约定空集和为 0. 将 j = V 0 b ( X . N ) 代入上式并取期望, 
得出 



E{X Tl - x s,) + -^+^(^T^ iXN) - X Sy ^ iX N) ) ^bEViiX.N). 


§5.4 收敛定理 
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这个表达式太复杂而难于直接应用.然而，由下鞅性质 

^( X Si - X 0 ) ^ 0, 

5E(^ s 2 - Xt x ) > 0, 

_ 

% 

b 

E ( 〜 - 和巾^-,)> 0 ， 

把所有这些项加到上式的左方,便得出 

EX n - EX Q ^ hEVi { X , N ). 

回到原始情形，我们己经证得 

定理5,11 { 上穿不等式 >• 设X =(义 nWna 为下秩，巧 (H) 为X上穿 h 6] 
的次数，即上穿 [ O^U fl j 的次数 .則 

El^(X, N)^~^ [E(Xyv-a) + - E(.Y 0 ^a) + ] ^ r^pSXj + [a|]. 

o — a I i 6 ^ a 

对下鞅（忍 Wz+， 由“上窜下眺”不等式知，当 Af — X)时， Vj(^iV) I 
某巧. 另一方面，因 （XJ) 也是下鞅，我们也有 EX+ T supEX + , 这样，若 

sup < 00,则 

n 

EV^ ^ (supJVf + |aj^/{fr - a) < oo 

< ex:, a.s, 

记上述例外集为 A〗， 令 A = U A£. 则 P(A) = 0,且在 A c 上,我们有 

a<b y a,b€Q 

lknX^ R ~ Hin^n ^ oo 1 

n n 

这便导出如下基本 定理： 

定理 5‘12 ■设 （ X n )_ 为下鞅， supEX^ < oo ㈡ sizpEjH < oo, 则 3X^ e 

n n 

罗 = y 萝 n 使為 SXx 且 Ep^j<OC. 

n 

证明由于 [ X n ) 是下鞅， E1X„| = 2 EX ^ - EX n ^ 2EX+ ^ EX U 可见成立 

“ 仁 y ■而 

oo > supElX rt j = Um E\X n \ ^ E|Xoq|. 

n n-^oo 
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最后的不等式用到 Fatmi 引理. 


□ 


注 5 +lS ■因（忍）是下轨当 iV — 00 时， EXW supEX n ^ supEX ^. 由此看出， 

定理的假设稍强于一种较自然的条件: supE ^ T n < 00 . 

在讨论 Doob 停止定理时，我们曾 ll 定 ( X n )^ 1 + 是一个鞅（下鞅).既然对 
于 ( x n ) nez +? 我们己有;^ 何时可使 { X n ) n ^ 也是下鞅？即何时有 


£[^1^] > Vn > 0. 


这等价于 




Xoo > / X n , A &^ n} 


但我们已有 


f X m ^ / X n> A ^ m > > 0. 

A JA 


这样，为保持右闭性，雒要 


f Xx , 5^ lim / X my A e 0. 

A m Ja 


如非负, Fatou 引理给出反向不等式，因此适当的条件是霈要的.条件 ^\ X n \ ^ Y 
可积”己足够，但我们将看到,这比下述条 件强： 






X 




这实际上要求，上式对 VA e U n ^ n 成立.若把条件稍为加强为 






Xoc, 





{ X n )^ Q 为一致可积族（见 [4S> pll8]) 


回忆 X € L l 等 价于： 当 a w oo 时， j [{xl>a] |X| =: E(|X|;|Xj 
类似，我们引进如下概念 / 

定义 5]4 .称随机变量 （ r.v.) 的族龙一致可积，如 


与此 


lim aup E[|Xh|X|^o]^Q. 

显然，如|尤„| g y 坷积，则（足0 一致可积- 
定理 5.15 <—致可积性判准)，为使身 CL 1 一致可积，充要条件是 


(1) I' 一致有界： s 叩吲別 < 00;并且 


§5.4 收敛定理 
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(2) 依概率等度 连续 : Ve > 0,那 > 0使得 


IP ㈤ < 5 


sup E ( jX |; A ) <€ 


定理 s.ie ( i 1 收敛准则) •设 ( X ^ CL 1 . 为使 


1 





\^n ~ ^(X?j 




00 


充要条件是队)吣0 —致可积且 


4 




证明以上两定理的证明见[66, p +228] 或|43,附录 （二) 1. 


□ 


让我们回到右闭性定理的证明.假设 (^)^o 一致可积，由 


E|X,Ka+ [ 1XJ 

和一致可积性知 — EH | < oc . 从而由收敛定理(定理 5.12) 可以得到 X rt - a - 
X ^^ LK 由此及1致可积性 


■y fl_S. v 

A n 丁 ^ Aqo 


x n i A 


—4 



oo 


Ia , 



Xn 



X 


00 




有时，我们需要考虑单调下降的 a 域流 (^ n ) n ^ 如 m > n , 则 C 资。 
此时，命穸 i n >0+ 则成为单调上升 a 域流：如 -m < 

则妒 - m C 穸^ 

定义5,17.设 （ X Tt )_ 为 (^ n ) n>0 适应的可积随机过程，且(^.)单调下降. 
命爹4 > ( X 称 ( X n ) n ^ 是关于 （， n ) 的反向鞅（反向下 

鞅)，如果 ( Y , n )^ 0 是关于（没的敎（下鞅 )， 

试看收敛性+因为 （ K _ + n ) 关于(^_,)为下鞍，所以 supEyj- n ^ = 

n >0 

EX 0 + < oo . 因而存在使得 


- 


X 


O 0 


a.s 


另一方面，由 x n e 及知 e A ^ - f | ^ n - 但由于 

n^O n^O 


m > n => ^ X m EX ^ > EX m , 

即当 n T 时, EH 我们还薄 要条袢 “ lim EX n > - oo ” 以保证 X 

n—►Cso 

性- 


oo 


的可积 


定理 5.18 •设为反向下鞅 + 如果 jim EX n > - oo , ( X n )^ a 
一致可积且存在使 

n 

X ^Sfc -rr 

Tt ~ ’ 入观 OO ， 

L 1 


从而 d 叉‘&也是反向 下鞅. 

证明只需再 ® ( X n )0 O 的一致可积性 1 对 e > 0, 选定 fc 使 


则由 

知 


EXjt - lim EX n < e. 

n—oo 

E[^j^ n ] ^ X n , n^k 
E[X n ;X n >a]- E[X n] X n ^-a\ 


~ E[JV „； X n ^ aj + — aj — EX n 

^ EpOt; X n > «] + ElX^X^y-a)-EX k +, 

^ E[Xfc; X n ^ a] — E[Xfe ； X n ^ —a] + £ 

^ 抑 AUn > aj + Ef|X^J;X n ^ —a] +e 

^ E [\ X k \ AX n \^ a \+^ 

但当 a —oo 时， 

mx n \ ^aj< -E\X n \ - i(2K^ - -{2EX+ - lim EX n ) — 0 

a a a 

关于 n > k —致地成立，故由定理5.15,当 a 充分大时， 


3 upE [ lX fc [; jX n !^ d ]^£ ? 

n^k 

从而当《充分大时， 

supE[|X n j;lX n | ^a] ^ supE[|X n j;]^ n | ^ a] + supE[1X n |; |X n | 

n n<k n^k 

□ 


§5.5 连维参数鞅（上、下鞅） 

在研究连续时间参数的鞅(下鞅)时，自然希望把它归结为离散时间参数情形, 
回忆在研究强马氏性时 7 从离散值停时过渡到连续值停时,一个自然的要求是过 
程右连续:此时 
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因此，右连续性起重要作用.特别是 Doob 停止 定理： 

E \ X t \ Jr 3 ]^^) Xs: 

^ U[X T \^s] = (^)Xs,t\T ^ S ； 

\ e [ X t |^]> X S at , —般情形. 

此外，在强马氏性研究中，还要求过程具有 Feller 性： 即对于每/ g C b ( Rh 映射 
x — E x f ( X t ) 连续 1 在这里,我们代之以 

T n i I , ，以 1 ， r. 

这就要求（少 山钟 具有右连 续性: ^ t 二 n 夕 v 如不然，则以 # v = pi 、，., 

S>t 3>t 

代替原先的夕^那么 c 域流 (^ + )^ o 就成为右连续的了.有了这呰想法之后， 
容易把离散时间参数的（下）鞅推广到连续时间参数情形.作为例子，我们来证 
明 

定理 S .1 9 ■设 ( X t ) t -^ 为下鞅， a , s .右连续，则对于几乎所有的此 X(tM 
在任一有限区间上有界. 

证明只需证 sup j 对每 n > 1以概率1有界.由右连续性，这等价于 

sup | X (!- sup | X t | 

iei ) n [ O t nj 

以概率 i 有界，此处 d 为 [0, oo ) 中的任一可数稠子集.再记= Dn [0,4 
设 f / A - 为的任一有限子集，并表 

= { 史 0 < 0 < ■ ■ ■ < 

则因 = ^ tJo ^ fc ^ A r 为下貌故 

炉 心 I ^ ^ —3 E | JV tv | ^ 三 E | H , 

iO^k^N 」 Of Q 

令 w 1 我们得出 

p [ sup l^j >al ^ - K \ X n l 

L t£D TL 」 O ； 

再命 a oo , 得到 

• _ 

P sup |X t | - oo =0. □ 

L tfD T+ 」 

对于给定的下鞅 ( X t ) t ^0 ? 当然有适 应性： 




t^O. 



如上所述，当非右连 续时, 则我们总可以用代替而假定 
右连续，因为此时适应性条 件“石 e ^ 是平凡的.以下设右连续 > 
另一问题是如不右连续怎么办？ 

定义5,20■称（切为 （不） 的修正，如对每一 = x t , ^ 

定理 5*21, 设（义）为下鞅， (^ t ) 右连续，则 （ X t ) 有右连续修正当且仅当 E 不 
右连续， 

证明见！43, P .199] 定理3+ □ 

§5.6 軟论应用两例 

1) 强大数定律鞅论应用的一个典型例子——古典的强大数定律，可视 

为鞅论的重大成就之一 （ J . Doob , 1949)』 

定理 5 + 2 2,设 ( X n ) n ^ 独立同 分布， E ⑷ | < 00■则 

71 

Y ^ X k / n ^ EX u n ^ oc . 

fc=l 

证明不妨假定 EA = 0, 从而 = Y 1 Xk 关于 f n : A <…是軟. 

命沪 n = < j { S m : m > n ), 则歹 n i 罗：= n 穸…固定 A : 1 ^ ^ - 考 

n^l 

虑鞅= E [ X fc |^ n ], 则由反向鞅的收敛定理（定理 5.18) 知 EZ „ = EX t > 
- ^歹. 特别地 

L l 

f E[^j^] 二 f X k= f Z n — f 
Ja Ja Ja Ja 

从而 = EKI 罗]. 另一 方面， 由于泛 T1 = a{S n ,X m : m > n + 1)， 而 
(X m ' 7 n > 7 i ) 与 (X k ,S n ) 独立，因而对于一切 > n + 1, 我们有 

… / £ ( X mf )]. (由独立性） 

及由独立性 

- E {/ i ( X mi * ^ + MX ^ M ^ kdiS ^}} 




§5.6 鞅论应用两例 
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进而 lEp ^ lr 70 n-l l |- E [^|5 n ] = E [ X 1 | S Il ], 后一等号 
是因 怂与& 的对 称性： 

^f{S n )X 1 ]=E[f{S n )X k ^ 

这可用单调类定理证之,在前一式中对从1到求和，得出 

^/77 = E(X 1 j5 n ) = E(X 1 |^ ri ). 

再使用一次上面的 结果： 

E \ X x |^ fl ] ^ E [ Xi |^}, n — oc . 

最后，由 lim S n /n = lim Y , 知 lim S n /n 是尾可测的 （Kolmogorov 零查 

7t ^ j 兰 7TI n 

律因而必定是常数，此常数必须是 EiEiXa ^ H - EX ^ O . □ 

2) 马氏链的鞅刻画 让我们回到马氏链 .设五 为可列集，（义为马氏 
链,具有时齐转移概率矩阵 （ Py ⑷)： 

假定其 Q 矩阵 Q = ( 甸） 全 稳定： 



以 R 表从 i 出发的概率，即 Pi [ X t = j ] = F [ X t = j\Xo = i \] 而以 E ; 表 W 相应的 
积分： 


^J(X t )= E[/(X t )|X 0 MH = I] 邮⑷九 • 


►124 , 
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论 


再命 Q/(0 = 则对于/ 


~ ^jky 我们有 


Qkj = Q^i^) = 5 ^ 咖心⑷ 


€ 


^2pik(^)%j - 加 〆 X u = fcj = y^Ef[QJj(fe) : X u - k 


k 


k 


h 


E 舰 (: U). 


使用这些记号，由 （5.4) 式和 Fubini 定理得 





t 


EiiQtjiX ^ du^Ei 


9 



t 


QIj{X u ))du 


或者 


E , / QljiX^du 





今设 (^ t ) 为过程的自然^域流，则由马氏性得 


K I,(X t ) - / Q},(X u )du^ 

_ Jo 


5 


t 


a 


E^iXt^-Ei / Qlj{X u )<iuX s - / QIjiX^du 

Ja 」九 


私 [(/ j (又) | X ) + 私 I ^ Xt ) - Ij ( X a ) 



Q/j(X u )dii X 


a 


s 



s 


QIjiX^du 


8 


t~S 


心™ ，乂 Jf QIj(X u )du 


3 


Ij(X s )- / QI,{X u )dn. 

Jq 


这表明 


id QIj ( X ^ 

Jo 


是 A 鞅.更一般地，若 / 为只依赖于芯中有限多点（即具有紧支撑) ， 记为 
/ e CME ), 则 

/ /t V 


f(Xt) - / Qf(x u )du, 


是 A 鞅.简记 


X{ = f{X t )~ / Qf(X u )du 

Jo 


则我们得出如下结果 


& 5-T 补充与习 JB 〖25 

定理 5*23. 对每一个/ e Co ( E ), ( xf ,， 山 ㈤ 是 A 鞅+ 

这是马氏链的一种秩刻画.事实上，这种刻画也适用于一般的马氏过程. 

§5.7 补充与习题 

1, 证明引理 5.2 之 （1 H 卟 其中⑶的数学表述 为:若 是下 
鞭,则上端 (x { t l) vxf } )^ 0 也是下鞅- 

2, 证明对所有的非负上鞅 X = ( X n ) 及实数 r > 0, 都有 rlPfsup X n ^ r ] ^ 

n 

EX 0 ^ 

3 , 若 （ X ,) 为软,则对于每一常数 g ( X f 八4为上鞍. 

4 ■设 ( X t ) t 钟为 Z + 上的上鞅, T 0 < T ! (…为停时*证明 ( X Tr X >{) 还是上 
鞅1 

5.设 ( X n ) n>l 独立同分布，且 EX ! = 0, E ^ 2 = 1■令 ， n 二 "( X m : m $ 卟 
& = £ 4,则(心，。)命和 ( Sl - n ^ n ) n > i 都 是栽. 

m=l 

6■若 (X n )^ 0 为非负下鞅，则 （ X ；： = maxXO^o 还是非负下鞅+ 

i^n 

7 •设 （匕)以 0 为五上的马氏链,具有转移矩阵 P = ( Pzj ). f = {/( i ), i € £) 为 
非负有界的序列、满足 

/W = ^^阳/⑴， ie E. (5.5) 

j 

令 A = f ( Yn)^n = a ( V m : m ( n ), 则 （ X n ] ，„) 是轨若将 （5.5) 换为： 

f{^) ^ y^Pij/(j)? i > o. 

_ 

3 

则忍 是上鞅. 

&设（7„)„ >0 为五上的马 氏链， 具有转移矩阵 P = (^).设/为尸的一个 
特征向童，即存在 A >0 使得 

a /(0- Ep ^^ iGE . 

I 

J 

令忍 = X - n f ( Y n )^n = : m < n ), 则 ( X n ^ n ) 是轨 

9 •设 （ X t ) t 5 f 0 为状态空间 {0， i ，2，..} 上的 Q 过程.若 = ( 於）： GO ) 为 
Qy ^ Xy 的非零解,证明 y t 二 ^ xt y { X { t )) 为狭 • 


10+ 在推论 ,5.5 的前提下，证明 Xr £多 r , F 及 X t I [ t < s ] g _^ s . 


11. 设 X n 为 Z 上的对称随机游动 ，令 

^ n), 证明： 


minjn : X n ^ {N, - A /}}^ N, M ^ 0, 


㈤ ( X n ^ n ) 是鞅; 

( b ) V n 彡 1,7~ A n 是停时； 

⑷ IP 0 [X T = iV] - 1 - P 0 [X 


M] 


M 

M + N 


12. 若 x n 为 Z 上的非对称随机游动（即 = PlPli . 1 = g，p + g = 1)， 令 

r = min{n : X n G {N, -M}} : N,M ^ 0 T = a(X m ,rn ^ n), 证明 


PoU 二川 =1 - Po [ X r 


M] 

_ 


1 - [q/p) M 


1 3 * 设 ( n)^o 为随机变童序列 J ㈤为对称的、非降的函数，且 Wn) = 0，并 
使得 (0(Vi))o^^n 为下铁-固定0 =补 s S ■ ■ ■ < ,S n ，证明 


t- 


(若 d(x) - jx | P : p ^ 1,51 = S2 


A ， 即得到 Kolmogorov 不等式 J 


14,设 ( Xt ^ tUo 是一个右连续鞅，/是一个非负凸函数，则对 V ^>0 


IP supf(X t )^e ^ - sn ? Ef(X t ), 

. t^o 」 ^ t^o 


15 •设 ( X n ^ n ) n ^ Q 为較.证明 

( a ) EX n = EJty , V n > 0; 

(b) V^,m^0,E[^ +m |^ n J X n ： 

(C) 令 Y n = X ny ^ n - 则 {Yn ： ^n) 是敎 ■ 

16. (Kolmogorov 零壹律）设 (X n ) n>[y 独立随机变董序列， ，为尾 ^ 代数，即 
^ = f| = <T{X n ,X^u -)^ 证明 v 4 e 要么 P ㈤ =1: 

要么 ?(A) = 0, 从而任意随机变量 r G ，，存在 -00 S C S OC . 使得 

W [ Y ^ c ] = L 

17•设 X,X n ,77 ^ 1是可积的随机变量 t 且当 a — 00 , F [! X n ! ^ a.j 一 0关于 
n >1—致地成立，则 

lim sup / \X\d¥ = 0 + 

a —°° n J [\ X n \^) 
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18 . 试举 一 例： 鞅义是 i 1 有界的但不是一致可积的 . 

19+设彡1是一列鞅 . 假设在 L^P ^ [ l ， ool ) 中，对任意 
O 0,义 ㈤ — 瓜则（叫咖也是 (， t ) 鞅， 


如.设 （忍； ) n ”均为 （少„)心 0 鞍， r 为停时+设在『 < oo ] 上， X T =斤， 


则 

是鞅 ■ 


z n - 


X ny 7 i < T \ 

o r 



21. 考虑 Q 过程 A 具无穷小生成元 a 令 T^n > 0 为第 n 次跳跃时间 , 

= 』 ii^7n ， 满足 P[r n < oo] = l,P[r^ = oo] = L 令 f t = a{X s : s ^ (}, 

对 V ?:， %) > 0, X ； qijfU) < oo, 定义 

3 ^i 


Z{t) ^ /(Xi)exp 


17 


Qf 




(X s )ds 


Z n (t) = Z(t A T n ) } n > 0, 


则 

(a) E,Z n (() 二 f(i)'t>0 〜 

(b) V ?1 (Z(r n ),^,F0 是敎 , (Z(t)^M 是 上鞅 . 
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无论从实际应用的角度或从数学理论的角度来看，布朗运动都是一类极端 
重要的随机过程 . 1827年，英国生物学家布朗 (Brown) 发现水中花粉的运动，起 
因干花粉受到周围水分子的碰撞，水分子的运动产生一种随机力，而花粉粒子每 
秒钟所受到的碰撞次数非常大，约10 21 次.因此，花粉的运动可看作是受大量微 
小作用力的作用而作的随机运动.设饵为一个花粉粒子在 f 时刻所处的位置的 
一个坐标^如液体均匀，则自 h 到匕的位移乂-队是许多几乎独立的小位 
移之和，即许多小独立随机变量之和.依中心极限定理， 

B t2 - B t , (增量的正态性） 

此处 f (a , 为表以 a 为期望、以^为均方差的正态分布.由液体的均匀性. 

Q .{ t U t 2 ) 

ffdh) 2 = < 7 2 { t 2 - h ). (分散程度与时间成正比） 

此处的7 > 0为介质常数（依赖于液体的性质）而与时间、空间无关,再则，由 
于私„〜^.. 1? 分别是许多几乎独立的小位移之和，故拟设它们 
是相互独立的. 

定义6丄称实值过程 ( B t ) t>0 为布朗运动 ( BM ) 或 Wiener 过程. 如它满足下 
述两条件. 

(1) 独立增量性.对任意的0 = 6 < “ < h < ■ ■ ■ < (打 > 2)，增董 

Bt 2 - B tl ^ - y B tjt - B tn _ t 

相互独立（这种过程称为独立增置过程 K 而且这些增董 也与爲 ^ 独立. 


动 

运 

朗 

布 

1 

6 * 

so 


,1:50 ■ 
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(2) 正态性，对于每此处 (7> o 为常数， 

设 ( X t ) t ^ } 为独立增量过程 I 若义。与 - | ti - A 二 
o , t 7l - o 也独立、则必定是马氏过程.事实上，对任何的 () < ^ < 

… < 命 

^0 = ^1 = ^ = ^ t ri - ^ Tl -L 1 

则 ( l ；) n ^ o 是独立 n 系列 i 且心 = ty ^ 为独立 「V. 之和，从而是马 氏的： 

i=0 

对于 BVL 若假定 f { B , = 0] = 1, 则 { B t ) m 是马氏过程 + 由上述可见，若记 
s = 4一1，则 

P [ B t ^ ajBf〆 .. ^ ^{ B t ^ a | B , j T 

另一方面,利用过程的独立增童性质，我们有 


町 /( 坟 ) 3 ( 玖 )j = E[f(B s - B 0 )g{B t -B s + B 8 - B^)\ 


2 tT <7 s ) 


exp 


X 


1 


27ia 2 ^s(t — s) 



exp 




2a 2 s 
x 2 

2 a-s 


exp 


y 


2 


2 d 2 (f - _ s ) 


f(x}g{x + y)dxdy 


f{x)dx I exp 

庇 



y 


2 


1 


27ra 2 s、t — s 



exp 


R 


X 


2 


2 cr 2 S 


f{x)dx f exp 

R 



2(T 2 (t -fi) \ 

iv - x f ' 


9(^ I y ) ci ；/ 





R 



^(5,0,d3：)/(^) / p(t -s,x,dy)g(y), 


此处 


p { t , x , dy ) 


V^Tto 


exp 


(V — 工 ) 

2 uH 


dy 


財于 fl 九(仏）也有类似的表达式.这表明：（玖) m 是具有转移概率 P(lMy) 

的马氏奋逢. 


§6.2 轨道性质 

定理 6+2 (Kolmogorov 判准卜 假设 3 ft,e > 0 使 

MX t -义叫門 < const ■ \ k \^, t,t + h ^ [ a ^], 

则过程 ( Xt) te1a?bl a. Sl 连续 + 



131 - 


§ 6 - 2 轨道性质 

对于 BM : 我们有 

-上 —U 

24!」 

= { 0 ^\ h \) 2m ^r I z ' 2mexp ~ T d " 

V * 7： J - oc ^ ^ . 

= c m \ hr ： .川 e n . 

可见 ,（ a ) 的轨道连续.应用可分性，可造出…个可分修正 T 使得此修正的… 
切样本轨道连续.另一方面 

P ( t ) Iix ) ：= / p ( i , x 7 dy ) f ( y ) = -_ L - 厂 'xp [- 

J v2irt<7 J ^ [ 2f(T- 

—> P(t)C b (R) c C & (R) 

(/ 卞 )) 啡是 Fdr 的. 

进而(:及 .） 是强马氏 过程. 事实上，我们有更一般的 
定理 fl, 3 . (汉)创关于是强马氏过程， 

由于常数 a 常为累赘.下面作一限制. 

定义 6 _ 4 •称 （則为（标准）如果它是 BM、cr = 1,—切轨道连续且叫三 0. 

上面研究了 BM 的一些简单性质 1 下面将研究 BM 的一些“奇妙”的特殊性 

质. 

定理 6*5 .设 ( B t ) m ^ BM , 则下述过程也都是 BM . 

(1) (- B t ) t ^ (关于原点的对称性或发射不变性)- 
⑵（氏 衫 - 氏) 创， G 0 固定（起点变换). 

(3) (啦 A:2 ) t>0 』>0 固走（尺度变换). 

(4) (叫/士冰约定它在卜^处为零（时间倒置). 

⑸ 固定 w > 0， （氏 - (时同反向). 

证明只证 （4) .命 

Xi. = t > 0. 

I 

a ) 由于私 (0, W )， 可见 



Xt ^^ (0, >/ t ). 
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b ) 再则,若 s S f ， 则 

E [ B s B t \ - E ! S s (场-艮 ) H EB 卜 EB s E ( Bt - B ,} + ES 卜 EB 
从而 E \ B s B t ] ^sAt 进而 

E [ X 5 X t ] ^ = s /\t 

这样，若 0 < G < (2， 则 E ( A ^ — 不 f = (2 — 2 ii A f 2 + ^ l = ^2 ^ ^ i - 故 

~ 〜 *^"(0, y / t 2 - t \ ). 

c ) 另一方面 : 对 fl < b < f 4 , 由增量的正态性有 

lEl ( X ti — X tl }{ X tA - = (2 A “ 一 fi A “ 一 #2 八亡 3 + G A 才 3 

=■ t2 — t\ — t^ + ti =0 ， 

这证得过程具有独立增童（熟知，正态过程不相关 W 独立) • 而对任意的0 < 

k < 亡1〈… < tn 及 …， a n € 肢、 

n ti 

UjtjBi / i . 

T-0 »=0 

是正态的，故 ( X t ) t >0 是独立增置正态过程 T 

d ) 最后, （ X t ) 的一切轨道在 (0, oo ) 上 连续. 至于在 f = 0处，按照 BM 的性 
质取可分集足以0为极限点，则 


lim X t = 0 f a.s. 


因此 5 可补定义 X 0 e 0 且使（义）在 f = 0 处（右）连续 ■ 
注 Si 上面的 （4) 给出如下强大数定律 


p 




□ 


定理6丄以概率1， BM 在任一点 O 0非 Upsthitz 连续，因此， BM 无处可微+ 

证明设在某 t G 队1)处 Lipschfe 连续*则存在 £，m e N 使得下述增 
量估计 

( 

Bk-^i — Bk ^ — 

- ^ n 

对一切 n > m 和 {(V ■ ■- 1} 中的接连三个 fc 成立. 记此事件为 A . 若记 


cx n-l 


^ = n u n 


Jb^O j 


B 


+i 


Bh±i 


rt 


n 


^ — 
n 
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Se . s 布朗运动的鞅性质 


OO oo 


则上述亊件可表成 A = U U A^,m + 因此，我们只需证明 IP(Af. m H (1 .但 


P(A £im ) ^ Tim F 


n— +00 


f =1 m=l 


( rt-] 2 r 

un 

、 fc=0 j=s=0 L 


B^±j±± 一 Bfc-hj ^ 


ai 


< lim nF 


n— 



Biil -B^r ^ (由平稳性) 

W FL fl J 


lim n [ IP Bx ^ — 


( 由增置独立性和平稳性 ) 


n~*oo 







3 


(: 尺度变换 > 


< const - lira n 

n^oc 

= o . 


(忐）（因/ 


2 


^ z.z 0 


最后一步说明了取接连三项的原因 . 


□ 


06 


0-4 


0-2 


0,2 


0,4 


0.6 


- 0,2 


BM 的样本轨道示意图 


由于有限变差函数几乎处处可导，因此 
推论6九 BM 在任一有限 g 间上非有界变差. 

定理 6.9 {BM 的重对数律 (L^vy)), 

■ 

p 一 l-®t - 

r lim sup 7 - 7 -~™ ■- i- 1；tJ 

训 （2< nogk ^}" 2 


§6.3 布朗运动的鞅性质 

设 (B t ) m 为定义在某概率空间上的 ( 标准 ) BM ， 命 = <7( 扎 : 



KM ■ 
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^ ^ 0 - ^：. - n u ，为一切 p 零集的 全体. 我们称 

(义） 是(^?)的完备化，作完备化是为了使 r 4 二 inf {> > 0 ： ^ £ .4} 关于一切 
A e . 離)可亂 

定理 6.10. 关于 ft ) 咖和匕 即 下 述断言成立， 


⑴是秩 ■ 

⑵ （埤仆 冲是鞅 ■ 

⑶ 对每 h K , (exp \ eB t ] -t9 2 3 }) m) 是铁， 称为 指数鞅 （BM 的拉氏变换）, 


⑷如 / fC 2 ( K ) (二阶偏导数连续)，/与 △/ = 


U 


有界，则 


是鞅」 



A 肌吹 


证明⑴由马氏性 

E , f /(£?0 I ^] 鄭). 

然后由单调类定理知，上式对于-切使 m ) 可积的/ e S ( R ) 也 成立. 特别 
地油尽的可积性得出 


E x [B t \^,\^E 8 ABt- s y 


然而 





H 
"" 2) 


(y - + ^}dy 


―X ' 
— X . 





dy 


(2) I [辦 | t ]， E :|( Z ? f -札尸 + 姐训「艮)+枵 |， s ] = (，- s )+0+ H ^ 

(3) i 己 


X t - exp 


9 B t 


& 2 

~2 


t^O 


X 卜 exp 


ff 2 


&(B t - B s ) - -™{i - s) 


t ^ s . 



§6.5 补充与习 题 


l ； i 5 - 


因为执 — ~ ，((M - 外得出 EXf = 1. 另一方面，；^与，独立且 
义二 A #. 因而 

L ^卜 E ^ X . X ^ s ] = X , E ^ = X , . 

(4) 这一条留待以后再证> 见第八章第 8.5 节. 口 

§6.4 高维布朗运动 

定义 6 .11. S t V …， 珣是相互独立的（标准的） = 问 ，，、 对）称为 
rf 维布朗运动 7 记为 BM d 

如同一维 BM , BM ^ 具有转移 概率： 

1 [ 1 d ] 

办工，办)二 i2nt)d /2 ex P 一五 D 仏 — A ) 2 dy，Aye ⑽ ■ 

^ ； L i=\ ■ 

容易证明定理 6.5 中的诸结论对 BM d 仍成立. 

定理 6 *1 2 ■关于（心)_和心以 G K ), 对 BM d B t , 下述断言成立. 

(1) (與) QG 是鞅. 

(2) (叫 2 - rfO ^ o 是鞅，这里 M =㈤ + ■ ■ ■ + xl ) y \ xeR d . 

⑶对每 MR 气 （exp [队叫-卜|們 )^ Q 是鞅，称为指数鞅 （ BM d 的拉氏变 

d ’ 

换)，这里 < x，W = E nyi，iy e R d . 

1=1 

(4) 如 / e C ^) (二阶偏导数连续)， / 与 A 卜 有界，则 

(⑽) -£*△/ ㈣ H 咖 

是敎. 


§6*5 补充与习题 

1. ( a ) (尤 Y ) 是二维的正态分布当且仅当对任意的 i /^ R^X + 吖是正 

态分布. 

( b ) 试举例 说明： 是正态分布，且不相关,但:^ Y 不独立， 
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2■令 T (^) = {0 ^ t < 1 : 试证明对 n . T ( uj ) 是闭集，并具有 

Lebesgiie 零测度. 

: i . 利用 BM 的重对 数律： 


limsup •— — — 
t|0 \Z2t\oglogt~ 1 






II mi …- 

“ G ^/2Moglog7 


-1> 


证明： 上题中 T ( uj ) 一定是一个无穷集，并且是一个完全集（没有孤立点). 


4,命 4 = inf{t ^ 0 ; = x }, x ^ R . 试证对于（标准） BM , r x 的分布密度为 


x(27Ti 3 )'^ 2 exp|-^ 2 /2f]. 


提示：由上面的性质导出 


exp ( Ox 


^ I : 


\ r x <, oo 


^ 1. 


由此导出 Ph < oo ] = i . 再取 A = y 2 , 得出 h 的 Lap lane 变换 


Eexpf - Ar^l = exp [- i (2 A ) J ^ 2 j , VA > 0 + 


由此导出结论. 


5, 证明概率密度函数 




1 


V 2 rrt 


exp[-(：r - yf / 2 t 


满足热方程 


dp 1 d 2 p 

dt ^ 2 研 


6- 证明对任意的 t >0, 


ir 




Buc^ 








从而 BM 在任一有限区间上非有界变差. 

7,证明如下 BM 的 Kolmogorov 不等式： 


sup | B fi | > r 




^2 


Se .5 补充与习匾 \：)7 

8. 证明 Doob I ； 1 不 等式： 

E ( max ^ 4 E 5?. 

9•令叭= j ^ B s ds . 

(a) 证明 E[W f ] = 0 及 E[W^} = P/3. 

(b) 求 给定尽 = t W) 的条件分布. 

⑹证明 (^-^ t ) 是軋 

10. 证明 S ? - :卜 dtBf 4 : WV ■ ■ 均是執 ■ 

11. 设（私）是 BM , 证明 

㈨ 丈 

E exp I A / B 3 ds ™ exp ( A 2 t 3 /6): 

L 九 J 

(b) t 

Eexp A f sB s ds = exp ( A ^ t & /15). 

L ju J 

12 . 设 （战） 是 BM ， 令 A = > 0: % = Sr tB u t € [(.U], 计算 

Ex t x ti j.,s go 和 e [ o ， ij . 

13 •令 M t = max 证明 

O ^ s^t 

( a ) h = 为马氏 过程； 

( b ) 过程⑺ ） 与过程 （ I 私 I ) 等价（即任意有限维分布相同) - 

14. 考虑实值连续可积函数 / 满足 

j f ( x)dx = a > 0. 

J-OC 

定义过程 f 

n - 4 /朋抓 

V* J(i 

证明极限 lim 丑[叫与 lim E [ Y ^] 存在，并求其值. 

15. 证明定理 6.5 中的 (I) - (3). 

16-设（私）是 BM , 义= a ( B s ,s ^ t ), r 是关于- 0 的停时1令 

s>t 

艮 = B Ht - B r , PJ { B t ) 仍是 BM. 

提示： 利用定理 6.3, 使用特征函数证明对任意 ii <^<-<4, ( B u ，…， 

或 J 与 （〜，■ ■ ■ ， B U ) 同分布. 
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第六章布朗运动 



17-设（氏）是标准的令 t = inf{t : B t ^ ( a 7 b)}(a < 0 < t ), 利用鞅的停止 


定理证明 T \ B r 


1 — = a ] = — a / (& — a ). 


18. 证明定理 ( U 2 所列的诸性质， 

19. 设私为 BM ， 令义二 A 为几何 BM ， 计算其扩散系数 


/I 丄 0 h 


和漂移系数 


h { x ) = lim E \ x ^ - X ^\ X ^ =x ] 0 < ：r < oc 

7 _ h 


20. 设执为 （标准的） d 维 BM , 令馬 = 岡 为径向 BM . 


( a ) 证明及是马氏过程，且转移概率为 


p(t ， .T,dy) 


exp 


+ y 2 

2 T " 


(xy) l ~ d/2 I d 


/2-1 




其中 4 为 Bessel 函数 


oc 


^( z ) = E 


k=0 


{ z / 2 ) 2k ^ l/ 

k\r(k + fy +1 


( b ) 令 r = M{t ^0: fi t = r }, 利用鞅停止定理证明 ET = r 2 / d . 


第七章随机积分与扩散过程 


§ 7*1 




机积分 


本章的目的是给出如下的积分的定义 



4>tdB u 


(7-1) 


其中私为 Brown 运动，0 =(如）为一 （ f t ) 适应过程，即:= a { B s : 
^ ^ t }. 回忆定义函数的 Riemann 积分也 dt 时 7 采用的是 Riemami 和 

n 

-u) 

逼近. 此处0 = t 0 < h < … < i n+1 = l t ^6 如果妒是随机的 7 把 她) 

理解为在时刻&的观测值（随机变董),那么上述逼近虽然可以逐点（逐个 M 定 
义，但过于粗糙，因为随机误差被忽略了.更为细致的逼近应当彤如 

n 

^ 1^(^-H D + - B u )], 

i^O 

这里 ( B Uyi - B ti ) m 是均值为零,相瓦独立的正态分布，乃是常见的误差形式. 
由此可见，我们需要研究形如 






的积分.后一加项即是本章所需要处理的关于 BM 的随机积分.由于 Brown 运动 
的轨道（即给定 a ( B t ^})^ 0 ) 不具有界的变差，所以不能将上述积分 （7 W 作 
为通常的 Lebesgue - Stieltjes 积分（固定为克服这一困难，历史上曾作过许多 
努力.例如 N . Wiener 使用分部积分公式 



二 ^Btln 





第七章晡机积分与扩散过程 


来定义随机积分（参考习题 2). 然而，这种定义方法要求如绝对连续，依然不 
能包括因此我们需要在新的收敛意义下,给出积分 （7.1) 的定义.要点 
是：虽然 BM 无界变差,但二次变差有限.因而可以在 P 等距同构意义卜定义 
随机积分.这种定义不是逐点的，而是几乎处处. 


令 




2 


{办=(也）：0为适应过程且1£ 



< p^dt < oc }. 


对公 G 叉'定义 Ml 2 = Ef tp '^ dL 则容易验证 || . || 是又 2 上的范数（在等价 
类的意义下).这里，我们直接处理无穷时间 K 间 [0,00), 自然包含有限时间区间 
情形： 

如同通常积分定义方式,先对“阶梯形式”的适应过程进行定义，再通过取 
极限的方式扩展到整个又 2 上， 


设0 = < “ < 


4 r r 


〈 t n < OC, (li ■ ■ ■ ， 为随机变量，满足(留心 


这里所用的是 h 而不是 hi 两者间有重要差别.参考习题3和4 广令 




♦t 二 X ] 以⑺ Af ⑴， GO, 


(7.2) 


：o 


则定义 0=( 扣）的随机积分为 


-1 


4 


0 


■= ^ _ )- 


0 


对如上定义的随机积分我们有 


引理7丄 




2 


㈣ 


为使对任意的4 e 又 2 ,定义随机积分我们需要下面的逼近的结论 u 
命題7. 2 . Vpe 龙 2 , 存在形如( 7 . 2 )的“阶梯形式 ”的少 ㈤ 使得 Ijm 11^-011 


CC 


CL 


借助命题7,2,我们可以定义 


定义 7.1 对0 = ( 也） G 龙 2 ,存在形如 （12) 的“阶梯形式”的0⑻使得 
Hm ||^-0|| = 0 : 则定义心为^^在 L 2 { F ) 下的极限，即 


tim E(I 小 - 


0. 


容易看到，定义 7.3 中所定义的随机积分4在^的意义下是唯一的，而 
且与“阶梯形式”的的选取无关. 



下面，我们回头来证明引理 7.1 和命题 7.2. 
命题 7.1 的证明由 （7.2) 及 BM 的独立增量性, 


I ^ ■ 

5>( 昂 : +1 - 氏 ) 


t=0 


• ， • 


B t 


i =0 


1^3 


u- t 


[ EgH ) = || 別 I 2 . 


□ 


0 






有界，否则令 = (f)V n A ( - n), 易知 


I 亡 — Q^ n ^j| —> 0, n oc ， 


a ) 设 ㈣ S M 且 0 关于 t 连续.对每 一 n , 令 


4 


ri ) 


0, 


p! n a j \ ^ 

, 也 dr 当 ^ <tg ^-,1 

(j- l)/n 打 R 

其他 ■ 


由 Cauchy-Schwarz 不等式 


f[j + i)/7L rj/n fj/n 

i |^ n3 | 2 dt = n . / ( p t dt ( <pjdt 

j/n J(j-\)/n J(j-l)/n 


从而 



txj 疒 ; x> 


咖. 


T-2/n 


于是 


(7.4) 



00 


咖 - O 


00 


=/ l^f -0 [ n) | 2 df-f I 咏 H 2 出 
Jo Jr 

‘ f - 0 j n) | 2 df + 4 / < j ) jdt . 

Jo JT2/n 




注意到由 0 的连续性知 4 在 [0/rj 上一致连续且有界，因此命 n 4 (7 而中 


的第一项趋于 0. 再注意到 Jfgdt < oon , 因此再命 r 
时， 


可知当 n — oo 



oc 


0 


l^t - 4 n )| 2 df — 0 T ELS, 
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再由 （7.4) 可得 

I \<lh - 杏 Hdt ^ 4 / \^t\ 2 dt < 00 , 

Jo Ji) 

从而由控制收敛定理知时- ^ n ) | S ^ o . 

b ) 设|0!《从 V %令如为 M 上非负连续函数满 足：⑴ 4⑴二 M 《 - l/n 
或，> 0, （ ii ) f^VnWt = 1.令 




Ks — t)<i) s <is. 


则以… 连续 T 且 d 容易看到 w … e 且 



\<k 一 ^ n ) S 2 df ^ 0, 


71 OC. 


从而由控制收敛定理得到1|^-0^||^0, 

随机积分的性质 

命题 7.4* 对4 e 又'定义 


它具有如下 性质: 






(1) 义关于 i 连续； 

(2) ( I 乂）是轶，从而 EX * =0 
⑶令 



t 


K = / 4 ^dB 

o 


则 


^ X t y t =^E f 

Jo 


从而 ' I ⑷ 

_ 

⑷对任意的 e / s ，有 



t ft 

(a<f> u + bi) u )dB u 二 a I +h / 〜 dB 



6 



9 



§7.2 ltd 公式 

如同微积分中微分的连锁法则，我们需要随机积分中的相应的法则，即所谓 


Ito 公式. 


设 U 是， f 适应的 je 又 '令 


x t = Xo + / u s ds + j v s dB 

Ji ) Jo 


5 


(7 A ] 


或形式地写成 


dX t — u t dt + v t dB t . 


口) 


定理 7.5. 设如 （7.6)( 或 (7.7)), 设函数二次连续可导.令 

叫二 X t )dt + -^{ t , X t ) dX t + 

其中 cif 和 dB t 的平方和乘积由乘法表 

乘积 dt dBi 
~ df ~ 0 0 




给出1即 




餐 ( ⑶ )㈣) 小 U 


04 dt + v t f x ^XMB 


证明不妨假设 


/’ 


dl dl d^l 

dt ’ dx ， dz 2 


均 有界. 取 0 = t 0 < h < … < k = A 由 Taylor 展开，有 

_ 

% 

=/(O』。)+ E f M E ^AX, + ^ 


护 / 


( Af .) 


+E g _城) + ^ E — (△足 ) 2 +E 瓜 


其中 


= ti+l — ti } ^Xi = + t ~ ^ii ^i) = p{^t+l» ^ )t 
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且 n t 二 o(iAt t ! 2 + iax#) 


如果 IA 6 




则 


E 


3 / a 」 A . L 


df 

Of 




2 



0 


91 

dt 


( s . X 3 ) ds , 


(7， S ) 





(⑽） AX 


i ? 



t 


o 


dx 


{ s . XM>^ s 


(7 川 


同时 


yM _ 


dx 2 



d^l 

dx 2 


u 


2 


(At0 2 + 2j^^u i vMti)(AB i ) 


+ E 


& 2 f 2 


dx 2 


<( AS t ) 


(7.10) 


% 


当 |AfJ — 0 时，上式的前两项趋于零，而最后一项在炉意义下趋于 



0 




事实上，记 


d 2 f 

dx ^ 


{ t . X ^ v 2 ^),^ — a ( f t )* 考虑 


2 


E ^(A5 T ) 2 -^a,A^ 内 ((△J5 l ) 2 _A~)((AB J f — 儿 


• • 
h ) 


当 i > j 时， a . ajdAB ,) 2 - At t ) ^ (ABjf - At ^ 独立，其期望为零 i 同样地，当 


< 


时，期望也为零.子是当 |AM 4 0时， 

(( A 财 - A # = 2 


2 


0 


即在 i 2 ( P ) 意义下 


(△耶 


2 



t 


a ( s)da 


o 


同样可以证明当 |AM — 0 时, 乙私 — 0. 


□ 


高维的 ltd 公式 设历二(與，…维 BM , 令 


d 


狀 】= 6“* ， A)df + [ ， (f，i = 1 ， 2, ■ ■ ■，n 


此处我们仅陈述高维的公式，更详细的讨论见下一章. 



sr .3 随机微分方程 


145 


定理 7.6. 设 / = (/!,-■■,/rn) : |0,OC) x IT — IT 二次连续可导，令 K 二 
/⑺不)，则对1 < i < m ， 

呵 = f(UX t )6t + Z g(t, X iW + J ： \^{tX LW ,Xl 
其中 d 所 dS f fc = Sj k dt, dtdt = 0, dfds/ = 0. 


§7,3 随机微分方程 


随机微分方程 ( SDE ) 形如 

dX/ = b(t.Xi)dt + a(t 7 Xt)dBt ， (7.11) 

其积分形式为 t ( 

X t - Xo-i- [ b(t,X t )dt^r [ a(t,X t )dB t . (7.12) 

Jo Jq 

此方程的解 义称为 It 6 过程，或扩散过程 + 下面我们讨论 SDE 的解的存在性 
和唯一性^ 

定理 7.7+ 设上述 b , a 满足 


+ |a(^x)| ^ C(l + |xi), (7,13) 

\ b { t , x )- b ( t , y )\ + \ t 7( t , x )- a { t , y )\ ^ C\x - y \. (7.14) 

则 SDE ( 7 .11)( 或 (712)) 存在唯一的解义，且 X t 关于 t 连续. 


证明 a ) 先证唯一性.设;^尤均为 SDE 的解，满足初值条件； C 0 = Z ， 元 = Z . 
令叫= b ( UX t )^ b ( t } X t )^ t = 冲义）-冲，元)，则 


E | X t - X t \ 2 ^ E Z - Z + I + / /3 s dB s 


^ 3E 

z-z 

b • 

2 ， 
+ 3K 

M 

/ Of & As 

7o 

+ 3E 

f MB 

.Jo 



2 

「〆 - 


' f f ^ l 

OE 

z-z 

+ 3ffi 

Uo 

+ 3E 

Jo ■ 


^3 E Z-Z 


+ 3(l+f)C 2 / EjX 5 -X,! 2 d^ 

Jo 


于是由 Gronwall 引理（见习题 15 ) 得到 


E|X t - 元 p S 3E|2 - Zfe 3 ^ 0 ^. 
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若 Z =艮则对所有 t 》0, E\X t -X t 


(X从而 


阿对 所有有理数 = X t 


再由连续性，有 




b) 再证存在性，仍使用通常的迭代法.命 vf > = 并归纳地定义 




4 十 1) 




4 - 



t 


0 


.Y} k) )ds + 



t 


a 


o 


x ⑻) 


dB A , k ^ 0 


如前所证、我们有 


E 


( 亡 +i) _ y ^) 


^ 3(1 +t)C 2 / E 

0 



t 


y(^ ™ - u 


2 


ds, k ^ l 


且存在只依赖于和 EX n 2 的常数使得 


n f 


i) 




(0) 


2 


^ At. 


因此 


E 


y(fc+l) _ y (t) 


2 




{At) k 


.>0 


注意 


sup 

Q^S^t 


y s 


(Hi) 


_K( k 


^ sup f b(r,Y r ik) ) -bir,vS k -^ 


dr 


+ sup 

0^ s^t 


f : [咖 y ，)) -咖 


Jfe-1) 


dJ3 


则由鞅不等式（推论5別和引理 7 丄 


sup 

O^s^t 


„ y(^) ^ 2 


k 




S 


sup 

Jo 


(r,Y} k) ) 


㈣ fc ] } )|dr》2 


+1P 


sup 


j: [a (”#) 卜㈣卜 ”)] 


dB 


^2~ K 




矣 A Ul E 



t 


r 


o 


x w ) 




dr 


2 


+4^ +1 E 



t 


0 




2 


r 


<4“】tE 



i 



0 

i 


r, 


v; ⑻) 


V 


W 1 )) 


2 


dr 


o 


+i k ^ / E ^(rX k] ) ~ ^Y T ik ^ [} ) 


2 


dr 


(7-15) 



一维扩散过程 
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再由条件 （7J3) 及 (7,14), 


IP sup VJ 


{^+ i ) _ ^ 2 ~ n 


^ 4 H1 C 2 {1 + 0 / E > ； ⑷ - Y r {k ~ l) 

Jo 


dr 


<4 料】 C 2 (l + t) 





^ 4 k ~^ l C 2 {l + t) 


A k t 艸 1 

(k + l)\ 


因此 


VP sup yj-y; ㈤ 3 2 一左 <oo 
k=1 LtKsW _ 


由 Borel-Cantelli 引理知 


f sup y; (…) 

■Q«t 


Yj k) ^2~ k } lo 


从而对几乎所有的 4 


y/%) = y/ 0, M + ^ (r^ +1) M- y ^(^) 




收敛.记为此极限，则由 yf > 关于 （ 的连续性可知的连续性+另外由6 


和 CT 的连续性有 


7 r } n ) )^ b ( s , x s ), (7( s t y ，)）— 咖 u 


00 . 


于是 



t 


^ Y, {n) )ds 



b(s,X 5 )ds, 


及由控制收敛定理和引理7」知在 L 2 {P) (从而在几乎处处）意义下 



a ( s , Y} n Ads 





a(s.X s )ds. 


因此义 满足 SDE (7.12). 


□ 


§7*4 




维扩散过程 


本节中，我们用随机撖分方程的方法讨论一维扩散过程. 

1 

设 J = (£， r) 为直线上的一个开区间 (-00 < / < r S oc). 设 a (: r) 与 b(j：) 是 
J 上的 Ci 函数，且对所有 t 6 /， ^(x) > 0,则随机微分方程 


dX t ^(r(X t )dB t + b(X t )dt 

X 


(7.16} 
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在爆炸时间 e = lim 7^之前有唯一解这里 r n = inf {^ : Xf ^ [ an ^ nj [ (选取 

n|cx> 

< i n , b n 使得 f < a n < 心 < r 且 a n 口， & T r ). 

可以证明在集合 k < oc ] 上、极限 lim X t x 存在且几乎处处等于（或 r 由 

此，在集合卜 < 00} 上，对 G h 定义义/为此极限.若记 

£ :咖 十 ㈣ 基 ， 咖 )=㈣ （ 7 」 7 ) 

则称为最小 i 扩散. 


唯-性 


所谓唯一性，是指此最小1扩散过程是随机微分方程 (716) 的唯一解，也就 
是说 P j = oc \ = l ^ x ^ I . 下面我们给出唯一性的显式表示. 

固定八置 

/*x 

^( x }= j s ( OM ( 0 ^ ah (7.18) 


其中 

再置 



(7,19) 


则易见 Sb ) 是 / 上的严格增函数且在 J 上满足 


£5(^) = 0, 

事实上，从 (7,20) 容易解出 S 的表达式. 

引理 7.8. 设 u (: r ) 为下列方程的唯 一解： 

Lu(x) — u{x) } u(c) — 1, u f [c) — 0. 


则 


定理 7.9. 


1 + k{x) ^ u{x) ^ exp (咖 ))， ^ G /, 


⑴若 K ( r -) ™ k (£+) - oo , 则对所有工£ /， 

Pj；(e = oo | — 1. 


(7.20) 


(7.21) 


(7.22) 


(7.23) 
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(2 ) 若 k{v-) < oo 或 K{i+) < oo , 则对所有 x & I ， 

P x [e < oc] > 0. (7,24) 

证明 （ 1) 使用 〗 t6 公式知 

为執，从而 Doob 停止定理知 e- fA ^u(X iA rJ 是铁 . 让 n — 00 得到 V；:= 
^■ c u(X tA ,) 是非负上鞅 . 从而 ER S EY U = 1. 

若 - k(^+) ™ oo, 由引理 7.8 知 u(r-) = u(f+) = oo , 从而 ¥ x [e = 
oc] = 1. 否则 3K < GO 使 A-j > 0 ,则 

lim EY t ^ liminf [ e~ iA ^u(X tAe )d¥ = og, 

t 一 CO t^oo 

这是不可能的 . 

(2 ) 不妨设 k(t~) < oo 且 c < t. 令 tj = inf{i : X t = r}, 则由引理 7+8 知 
， - 是有界鞅，从而 

让 t — 00 有 

u(x) — Ej ； [e^ c w(r—); lim X/ = r] + Ea ； [e^ 7 ^(c); lim = d. 

t—A fj t—^eArj 

因此必有 E^e^; lim X f = r] > 0 (从而 h[e < oo] > 0). 否则，如果!£>_、 

t—e Atj 

lim X( = t = 0 ，贝 ! J 

u(x) — lim 足 =c] < u(c), 

i—►£ Ar^ 

这与 U 的单调性矛盾 . 口 

常返性 

记 7 ； = inf{t ^(i -.x t =y} 7 yel. 扩散过程称为常返的，如果对所有 

^,y e 1 : \T y < ooj = 1. 

定理 7.10. 

(1) 如果 S{i+) = —oo 且 S{r~) = oo, 则对每一 z £ A 都有 

■ ■ 

W x [e = ooj = lim sup — r — P ^； lim iaf X t — ( — L (7.25) 

tloo L 」 
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( 2 ) 


如果 S ( i +) > -oc ^ A 7 ( V - ) = IX ，则 limX ( t ) HVa _ s _ 存在，且对每一 
: re /，都有 


P, 

^ ■ 


F ^ 

1 

supX t < r 


: t]e 


- t<€ 

n ■ 


(H) 


对换〖与7%类似的结论同样成立. 

⑺如果 S (£+) > — oc 且 S (卜） 〈叫则 limX ( t ) P r - a + s . 存在、 且对每一 

L 都有 


K 


i* ■ 

_ 1 一 

lim X t ~ r 

t^€ 

J M 


t]e 


S{r-)-S{x) 

s{r^)^sy+y 


(7.27) 


更进一步，我们有 

定理 7,11. 对所有 t £ Pje < do) = 1当且仅当下列情形之一 成立： 

⑴ k ( t —) < ( Xi 且 k (^+) < oc ; 

(2) K [ r —) < oo 且 S (^+) — - oo ; 

(3) K ( O ) < oo 且 S ( r -) — oc \ 

定理 7 JO - 7.11 的®明可参考文献 [35, §6.3). 

遍历性 

I 上的概率测度 X 称为义的平稳分布，如果初始分布 t 则对任意的 
时刻 （ > 0,都有 〜 T ， 即对 J 中的任一 Borel 集£， 

= J ^ Pt ( x , B )7 r(dxl 

其中 P t { x , B )^^ x [ X t eB ]. 

设 n { dx ) = TrbidA 即 tt 关于 Lebesgue 测度具有密度函数 7 r (, r ): 则 

^{ y } ^ 咖 ( x 、 dx 、 

其中 pt (工， y ) 是 P *(： r : dy ) 关于 Lebesgue 测度的转移密度函数. 

事实上，一维扩散过程是可配称的 7 即存在测度 p 使得 

J ^ fLgdM ^^ gLfd ^ V /， jeC 2 ⑺. （7.28) 

从而若 W /) < 则可得到平稳分布. 
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可以验证, 





dy 

a ( v ) 


exp 



b i z ) 

a ⑷ 


dz 


满足 (7.28). 其中 c e J 任意 T 从而若 


Z 



dy 

a(y) 


exp 



M 

a i z ) 


dz < oo . 


(7.29) 


则 


+) = _ exp 



M 

a ⑷ 


d 之 


即为平稳分布.因此扩散过程 x t 遍历当且仅当 


K (^+) — —) = oo 且 



dy _ 

a(y) 


exp 



b i z } 

a ( 二 ) 


cU < 00 


第一特征值估计 


令 L = a { x )^^ b { x )^ 考虑半直线 [0, Z >)( Z > 上的 i 扩散过程.我 

们考虑 Neumann 边界条件的第一特征值的估计问题+假定> 0且由 （7.29) 
定义的 Z < 00,其中 J = {^ D ). 即扩散过程&是遍历的.记 C ( x )^ ft / a ， 并 



7r(dx) = exp[C(j ： )]dx. 

Za[x) 

在 L 2 (> r ) 上，算子 L 有平凡的特征值 A D = 0,我们感兴趣的是下一个特征值 M , 
即所谓的（非平凡）第一特征值 3 对于有限區间 （D < 00) 且系数连续情形 ，此即 
是特征方程1/二 - A / 对非常数的/成立的最小的 A . —般情形的 Aj 由经典的 
变分公式（极小极大定理> 来 定义： 

Ai = mf{D(l f) ： feC^\0 7 Dl tt(/)-0 7 tt{/ 2 ) - 1}, 

这里 D { f } f ) = a ( x ) f f { x ) M ^ Mf ) = /( f / dTr . 


定理 7,12. 令， = {/:/如） >0, xe (0,1)), tt (/) >0}- 则 


Aj ^ sup inf 


-C(x) 


sup 

/ 


x6 ( 0 ^) f f { x ) 



f ( u ) e c ^ 
a ⑻ 


-l 


du 


(7.30) 


进一步 > 若系数 a 和 & 连续，则 （7+30) 中的等式成立, 


证明对/ e f ，记 


KfW 


— C(I} f D f { u ) e c ^ 


广⑷ 



a ⑻ 


du 



■ lf )2 - 
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令 p c (^[(KD) 满足 tt ⑷= 0、则对任一 / e 义，有 


而 


2 Jo 


7y{dx)7r{dy)[g(y) g(x)} 



7 r(dx) 7 r(dy) 


㈣ y ] 



g'i^y/fiuj/^f f (u)du 





Ky ] 

pD 


fV fV 

7 r ( dx ) x ( dy ) / j f { u)du 

J X J X 

(由 Cauchy-Schwarz 不等式) 

/ y ^ p—C:{u] 

uW ⑻ 2 f c(tl> a ㈤ Mf(y) - f( x )} 


f D Zer c ^ f u f D 

f o a «( u ) K ( dT ) y ^ y )[ f { y ) - f(^)l 


(7 ■叫 



n(dx) 



^( d v)[f{y) - f(^)\ 



「 TT ㈣/ KvM^y) - f f{x)n(dx.) f 7 T(dy) 
j} Ju J(\ 九 

rD pD pO pu 

’ /( 咖 ( dy ) - / ^( dx ) / /( y )7 r ( dy )- / f ( x )^{ dx ) 

li Ju JO 

「 fivWy) - / Mdx) / /(yh(dy ) (因 tt(/) > o) 

u Ju Ji) 

rD i 户 D // 、 _fl“A 



7 r ( dy ) 


KvM ^ y ) 


D f(y)e c ^ 

a (y) 


dy . 


此式结合 (7.31) 得到 


f a(x)g f (x) i2 7T(dx} ^ inf I(f}{x) 

o X^(Q,D) 


先对 9 G C 1 \ti } D),7：(g} = 0,^(^) 
(7,30). 




/ e ，取上确界立得 


欲使 （7.30) 成为等式，需要更多关于特征函数的知识.可参考文献[13, 


Proposition 6.4, Lemma 6*2], (8, 定理 1 J 的证明 j 和 [9]. 
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1. 直接计算积分： （ a ) ( b ) J ^ sdB s . 
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2•设也 ㈣ 三也 ， V s 会0, /在 [0， f ] 内有有界变差，证明 



4> s dB s =tB 



S^dog . 


3. 设 (J = k <6 〈… < = ]』 t € { UA^l 命 # = B &i , 如 k ■ 

试证当分划的直径趋于零时，以概率1有 


sup ^ { t n) - B t 

Q < i^l 


0, n 


但当变动时 ，和数 


k=o 


_ — 

B t k ) - E ( n ) 


k =0 


的极限点可以充满 1 M . 
4,改用对称和 


n-1 

E 

li =0 


ii +6 +i 


(历 


B u ) 


退近来定义随机积分，称为 Stratonovich 积分，记作 ( p t odB t . 微分形式 
记为 < f> t o dB t . 试证此时 ltd 公式取通常形式，如/ : x R — R 关于;一 
次连续可导，关于: r 三次连续可导 ， K = /(( X t )， 则 

dY ( = & +【<H 

这种积分的优点是对 称性， 缺点是关于/的条件稍强.在具体计算时还需 
回到 It 6 积分. 

5,证明命题 7.4 中诸项 T 

提示：由引理7,1和命题 7.2 及第五章习题19,只需对少为“阶梯函数”加 
以证明， 

6* 设历二(巧 V 、琦）是 d 维 BM , 令& = |私 | 是径向过程，则 

d _ . 

R t dR t ^J2 Bl t dB l + J}L ^- dt 

i=l 


7. 考虑如下 Langevin 方程: 


其中^ b 为常数. 


dXt — adB t - bX t dt , 
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( a ) 利用 ltd 公式求解此 方程. 

提示： 考虑函数 = 

㈤ 给定為= I ,求出的分布 P { t } x , ). 

( c ) 若 cr 2 二 1,& 二 1/2,证明 Pit . x , ■) 是标准正态分布 ■ 

i — >00 

8. 给定常数 a 证明如下线性人口方程 


dAf = t\NfdBf + A^dt s t ^ 0 

的解是凡 = A r o ^ +ftJ?f ，其中 t ) = - a ” 2 ' 

提示：考虑函数 e bt+ax . 

9. 考虑如下非随机的两个方程 的解. 

㈤ 证明 dX , = X^dt X 0 = 0的唯一解为 


X t = 


0^ / < 1. 


于是当 HU〜oc (爆炸). 

( b ) 证明 clA = : iX t 2/3 d ( ? X o = 0 的解非唯 一. 事实上， Va >0, 

Xt = f (卜 a) 3 J > A 

I 0, t ^ a 


都是方程的解. 

10, 证明 dXi = cX [ dt 的解非爆炸当且仅当 r > li 


1 L 设公 £ 龙 2 ,令 = f ^ s dB s , 则 V \ T >0, 

P sup \ X t \ > X 



12* 令 = 从办不冲 + cil7 = "2(V^)df + f7 2 (Cr t )di?f ， 证明 

( a ) dXf ^ a l ( t , X t ) 2 tit + 2 X l dX i ; 

(b) d(X,r ,)- 不犯 + V 不 + 

13, 令 = exp(〆 + cr £ f t ),/ i ,(7 e R , 计算 dlV 

14, 令 h = 则 X t (1 ) + af 2 ) 满足 

dX t (1) ^ - X ^ dBt , d ^ t (2) - — ^ 毛 ⑵ dt + X t ⑴ ( U 3 t - 


§7.5 补充 与习題 l 5 o 

15. ( Gronwall 引理）设办和/是 (0, oo ) 上的 Borel 非负函数，满足 

4 >{ t ) < c + [ f {$)< j >( s ) ds , t ^ 0, 

Jo 

其中 oo 为常数.则 

小 (t) ( c exp I / ⑷ d 5 T i ^ 0, 

L 九 J 

(此引理的最新的推广见 [48],) 

16. 证明如下的一维扩散过程非 爆炸： 

dX t ^ a(X t )dB t . 

17. 证明： V / eC 2 ((^ r )) 

啡卜― ㈤ ’邮 r ). 

18. 证明引理 7.8. 

提示： 先证明 (7.21) 等价于 

u(x) = 1 + j: <[S{x 、 j: u(z)dM{z), 

再用迭代法 u (; r ) e 0,^(^) = 

00 

n=0 

19. 证明定理 7.10. 

提示： 考虑 dS(X t ). 
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§8.1 Doob - Meyer 分解的唯一性 

本节的目的是为建立更为一般的随机积分和研究随机微分方程作准备. 

设 ( a ^ 5 lP ) 为概率空间， (^) oo 为上升 a 域流. Dool > Meyer 分解定理 
说 的是： 每一下鞅 ( X u ^ t X ) 必定可 表成： 

X t 二 M t + A u 

其中 （ M f ， A , IP ) 为軟，而（叫为增 过程： 

s ^ t A 5 ^ A t , a , s , 

但我们这里只处理一种特殊情 形：设 为鞅 T 且右连续、循序可测 （简 
称为 右循. 注意对于右连续过程，由适应性可推出循序可测) ，则 ) 为 
下鞅 t 我们要证明形如 

X ^ M t + A t 

的分解.对于不= B t 的特殊情形，由于埒 - f 是敕，因而我们己有 分解： 

Mt = - t, Af = t, 

我们先研究分解的唯•性，随后再讨论分解的存在性.自此以后，总假定所 
涉及的鞅和下鞅为右循.下述结果是一种分部积分公式（又见本章习题 1), 

引理 S .1 ■设 ( X t ^ u F ) 为鞅 ， A ; [0: oo ) x 右循 ' a . s . 连续且局部有 

界变差（即除一零测 集外， /!(• 〆 ）在有限时间区间 [0: T ] 上的全变差 1 A |( T ^)< 
x ), 假如 

e \( sup |^[)(|^|( T ) + | A 0 |)1 < oo , VT >0. 

L 、 0<t<T 1 」 

则 f ^ X t A t -^ X 9 A ( ds )^ t} ^ 是轶- 
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证明 给定 和 r € 记知，々 = s + -((— s )， 则 


E [^,4 i - X , A ,； r ] 


n-i 


= E 






Jt=0 


■ n 




A 


k 


Jc =0 


■ (由鞅性) 


由于 u …右连续， w a , s . 连续且局部有界变差 , 从而 

- 々 L . jj ] 一 / p - a.s 卜 

fc =0 

再由所设条件知 7 此收敛实质上是 i 1 ^). □ 

自此以后，对局部有限变差函数广我们以 |/|( T ) 表/限于 [ o , r ] 上的全变 


引理 8 . 2 .设 为 u 连 续鞅. 定义 c = sup {# ^ 0 : \ x \( t ) < oc }, 

以概率1有 X 叫 -t > 0 + 特别地，如果对一切0 $ s t ^[ X t - X ,] - 0, 
则以概率1 ， taX t 在任何区间上非有界变差. 

证明不失一般性 T 可设 Xo ^ n 且义处 处连续.定义 

c" = sup{t ^ 0 : \X\{t) < Ji}, 

= inf {( ^ 0 : | Xl ( t )^ fi } (留心 \ X \( t ) 关于 i 上升)， R > 0 . 

则 Cft 为停时且当00时， G 丨 C . 由引理8,1和 Doob 停止定理知 

/ ft^CR \ 

Xf AQH - Jf X s X ( d 3), J^u Pj 

是執.因而 

rt^R 

EXl iH = E / X s X { d ^ 

Jo 

另一方面，由于 X. aCh a . s . 连续且局部有界变差， 

i'MCfi 

~ 2 / X a X(ds)， P-a.s. 

Jo 

由以上两式得出 

EX 大 Ck 二0, W > 0 

= 0, f ^ 0, F-a.s. 

= 0 = Xf) ? t > 0 , F^fL.s. 
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为证明后一断言 ，令 

0 (). 

我们只需证明：对于一切*>1 


为此:命 
则 


= oo, P-a.s, 

X = sup{u ^ 0 : < oo}. 

P[['T|(0<oc]=P| s C>i]- 


把前一断言应用于过程〜，得出 


= a 在卜 C > q 上， a-s. 

4 A = 在忾 > t ] 上， a . s . 

4 f[X >t\^ P[JV t = X s ] =0. □ 

推论 8. 3 -给定 {X t ) m . 则可能除一个零集外，至多只有一个右循 （/!,) 使 

⑴ A 0 = 0, (A t ) a.s. 连续且局部有限变差； 

(2) ⑷〜山，夂 i.P) 是狭 — 

证明假若有两个 （4) 和（次）满足上述条件，则应用引理 8.2 于过程 
得出 

— — /lo — Aq — 0, P-3..R, n 


§8.2 Doob - Meyer 分解的存在性 

定理8,4 ( Doob - Meyer ), 为 a . s + 连续 巧 P ) 鞅.则存在 Pn 

唯一的右循 ( A t l 使得 

⑴ 為二 0, A t 非减 >a .s. 连续 s 
(2) —八， tl P ) 是鞅. 
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证明唯一性见上面的推论，往证存在性+不失一般性可设 
列（切如次： 7 


^ o =0 T 定义停时 


T ^ k - ㈣ (^^< r fc ° +1 ) 

- 0, n ^ V } 



sup |X 

rp^s^t 



A(T^ + l/7i)Ad 


如 ^0 T Ol . 

夕 t 由使 r 连?性易知以⑻ w 且 ® 。心- 


.s. 


此 


当 — oc 时， 4 s oo ， P， a s 

丁 g < t (寸 +l 1^( ^ 1//1, k^O, F-a.s. 

取序列 〜 t oo 使得 P [ r^ t ^ n ] ^ i / n 并定义 


K 


^ J 1 X n i ( X ^ r ^ 

A = r(J 


容易验证下述 事实: 





(a) M^ 1 ^ = 0, n > 0; 

( b ) ( M'AW 为 a. S . 连续 執； 

( C ) 々^右循，仏连续;如04 1/%则^^々；（注 意若 u 属同— 
h ' # +1 )，则未必有此增性质 .） 

(d) 1 7 0 ^ ^ n, u; £ A n > n], 

X^ = 2A/,» + ^(a；) fc 


往证：对任给的 r > o 和 


^ > 0 , 


lim sup P 

woo n>m 


「 


sup 

Q^t^T 


=o 


为此， 设 ”〉 m > r ， 并命 (=r a 八々 k 则 


sup 

l o^^t 


MP - M ^ 


^2/m + E[{M^M^f]/^\ 


sup 


MK C |^ 



§8.2 Doob - Meyer 分解的存在性 


Lfi 


最后一步用到 Doob 不 等式. 定X P k = tJP A C ， 々 = A C 由于阳< 
{ p h } c . { a ,}. 由定义，并注意到 < s 和{外} C {〜}，则有 


A ： 


M c- M r = E^(^c 


Ar Ml 


1、 m 


0 




5>办- -- 


6=0 








YJ 

k 9 t =0 


-E 


k ^ l=Q 


f ； l 〜批 )(〜-、)(〜 


x & 


P - a*s 


fc, 於 =o 


由鞅性知,上述双重和数各项在 L 2 ( P ) 中两两正交，因而 


E\(M^-M-) 2 } =E ^ I 〜 i5 ( 〜 )(X〜-A 

- AjJ=0 




m 2 


fe^O 


2 


EK . 




2 


^=0 


m 


m 


E ( A C 2 ) (由正交性) 

E ( X |) < oo , 


这便证得所述断言. 

现在，让我们使用下述引理来完成存在性证明. 
引理 Si 设 (XD 右循、 a . Si 连续，取值于 R d . 如果 


则存在右循、 a . S . 连续的（义)，使得 








2 


lim sup P sup — X t m ^ e — 0. 


lim sup P sup — Xt ^ € = 0, 

n>m L 0 供 7 ， J 


T >0, ^ > 0 
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此引理是一种随机的完备性,其证明冗长，此处从略.详见参考文献 [57, 引 

理 4.3； i ]. 

至此，我们已 证得： 存在右循、连续的 （ A ^) 使得 


lim sup IP sup JA // 7 - A/ f I ^ e 



T > O t ^ > 0. 


特别地、对每一固定的 L A # 乙 At 上述证明实际上还给出因而 
( A / t ， iM ) 是 a . s . 连续缺. 

最后 ： 命 W 二 X 2 - 2 A /. 则，右循.另一方面，由上面的 d ) 知， 


lim sup F 

,l N 30 n>m 


sup •- A [ ^ — 0, 

-0< i <7， -f 


进而由上面的 a ) 和 t ) 知 


T > 0 : 6 > 0 . 


A ^=0， 4 非减， a . s . 

这样，只需取 

乂 0 = 0 ? A t - sup { A ^ - Aq ). f > 0, 

0 ^$<t 

便得出所欲求者. □ 

定义 8 . 6 , 记为连续实 I 2 ⑻軼 { X h ^ t7 ?) 的全体，对于 ； C = 

命 < X ) — ({ X ){ t )) 为上迷分解定理中所得到的增过程，称为二次变差过程. 

再命 

{ x , y }- i({x + yj ^ (X - y }) 7 

并称之为 联合二次变差过程. 

引理 8,7. ( X , Y ) 右循、 a 、 s . 连续、局部有界变差 ， 进而 { X , Y )( T ) e L l (] F % 
T ^ 0. 


证明因为 （ X )( r ) = \ A [( T ) ^ A t = X ^. - M t , E \ A \( T ) - EA T = EX | < oo . 
从而 土 □ 


§8,3 变差过程的性质 

定理 8 凡给定;则是 ai 唯一的右循、局部有界变差、 a . s , 
连续的过程 ； 使得 { x . y )( o )= a ) a 

阳-〈训⑷名， P ) 

为鞅.特别地、对于有 


§8.4 随机积分 


- m 


( 1 ) ⑻二 {X 、 X]'u 

(2) 线 性性 ： (aX 4 bY , Z ) = a { X , Z ) + h { Y , Z ), a , s . 

(3) Sdiwarz 不 等式 ：[(^^}|^) ^ {X}^) 1 ^^}^) 1 ^ 2 a.s. r e 龙 (jO, oo !) ; (从 

而 |( x ; y )|( r )^ i (( X ){ r ) + { y }( r ))) 

(4) Minkowski 不等式 ： （X + Y )( l ) ^ ( X }{ Y ) 1/2 + { K )( r ) 1/2 , a . s . 

证明第■■项断言即是引理 &7. 我们只证 （扑 其它断言或由唯一性导出或可类 
似地证明，为此、只需验证： 

l ( xy ⑻- { xy )(. s )|^ ({ x )(0 - W ⑷) 1/2 (⑺ ( f 卜 ( Y }( s ))^\ a . s . 

以 a 和 Y 分别代替 x 与 y ， 归结为 

KX , y )( i)U ( X )( f )^( F )(0 1/2 5 a . s . 

其证明是内积与范数关系的典型手法.由线性性 

(K ( AX ± Y / X ){ t ) = \ 2 { X )( t )± 2( X , Y )( t ) + { Y )( t )/ X \ a + s ., A > 0 

得出 

队 n ⑴ I^IAMKQ + OOWA 2 ]， a . s , 

取 a 使右方 最小 ： Y = ({ y }^)/^}^) 1 ^, 得出所欲证者. 口 

■ 

§8.4 随机积分 

给定右楯、非减、 a . s . 连续的4 = ( A t ), 记 
L ^ C ( A , P)=|q : [0, oo ) x Q ^ 循序可测且 e / 办 ㈣ < 00, VT > oj . 

对于给定的 ae LlJ { X ), P ), 我们将证明存在唯一的 [0, oo ) x Q ^ 

K 使得 

⑴ /(0) =0,1^ 

(2) (/, y }( di ) = a { X , Y ){4 t ), a . 5 . VY G 

唯一性证明假定有两个 / 和 r 满足上述条件，则对一切 { ID ] 三 
0, a.s. 特别地，取 Y 二厂广 则 （7 - r} = 0, a+s. 因而 

E [7( T ) ^ I f { T ) 2 \ ^ E [ A / t ]+ E (/^ I f )( T ) ^ EM t ^ E ( M 0 ) = 0. 


故 J =尸， a.s. 
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定义 8.9. 上述 J 称为 a 关于 X 的加随机积分 T 记作 J = = •叫 

与第七章不同,这里是公理化定义而非构造性. 

引理8,瓜 如存在，则 E [7 a ( T ) 2 ]= E [/ 0 T a t 3 ( XJ ( d 0]. 

证明由条 件⑺知 { I ^ Y ) = a ( x , y } ; vr 因而 (4, / a ) = ^( xj ,) 


进而 


IE ct t dX t 


E [ M ( T )] + E [{ I a J ^)( T )\ 



a ⑽㈣ 




引理 8+11( 线性性).设 a , 紅 和存在，则 (aa + bf 3 ),X 

也存在且 


{aa + hf 3 ) t X = a ( a ^ X ) + h ( 3 m X ), a , b € R . 


进而 


气工((〜义)广(/3•抑） J <4 E 乂（叫，(叫， r > o , 


证明只证后者.由 Doob 不等式 


E sup {{ a . X)t - ( A ^) t ) 2 ^ 4 E [(( ft , X ) T - (^) t ) 2 ] 

L J 


4 E 


4 E 


[U 

[(/ 


ctfdXf — 


I 3 t d 


o 


4 


2 


(a t -[3 t )dX t 


2 


(线性性 ) 


4E 





0 


其中最后一步用到引理 8.10, □ 

现在转入研究随机积分的存在性.我们回到了第七章的构造性手法.先看一 
特殊情形. 

定理 8.12* 对一切 a e Ll c {{ X),Fl a 9 X 存在 ■ 


证明先考虑简单的 a 即存在 n >1使 


~ ^[nt\/n\ t > 0_ 


§8.4 ® 机积分 


1(55 _ 


命 


00 


n !) : ^ k/n 


k =0 


〜出 - X tA 


则 Je 此外，若主则 

n n 


mm n^Ys\^,\ = mnt) - n^m - y s )\^ $ \ 

， /ri E[xnm] 

=mw mo- (啦 y)) ⑷ i， s ]， n 

换言之， 

( LY ) ^ a ( X , Y ), a . s . Y € ^] r 

故存在且等于如上定义的 /. 

今设 Q 有界、循序可测且^连续.取 


a 


㈤ 


^[ nt]/n 


则而且由前一引理和控制收敛定理得出 


E 


sup 
L 0 <^T 



t 


必 ) c!X u 〜 



i m ) d ^ 


2 


0 


<E 



T 


(a 


(71 


M 2 W ( dt ) 


0 


Q t n —► oc 


因此，可定义〜为 J ； ai n ) dX u 的极限.我们有 


E 


t ft 

sup I I <\^dX u - / a u dX n 
LO^^T v Jo Jo 

r 



< 


4 E [乂 (。卜 ，) 2 ( 聊) 


—()，n — oo 


为完 成一般情形〜 X 的构造 ,只 需使用如下的逼近. 

引理 8.13. 设乂： [0, oo ) xS)y [0,00) 非减、 a.Si 连续、循序可测且 4(0) 三 f ). 

给定 af . Ll c { A , Fl 则存在有界、 w 连续的序列 { a %} C L ^^ IP )， 使得 


证明由于 LJJ 4，] P ) 中的有界元素之集显然在 iU 木 P > 中稠，可设 a 有界. 
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先考虑 4 
的软化子 p: 


= 0 ) 的简单 情形. 取 p e cf(oj ) 使 J P (t)dt ^ 1 (R ri 上 





，如 W < 1 ; 

如 


其中 （为 归一化常数.注意 SU ppp 被包含于中心在原点的单位球内).把(V扩 

充为 ffi x n 上的 函数： 屮三 h 如 t < 0. 定义; nfa t - s p ( ns ) ds , Ti > 1 .易 

证 oW 即为所求. 

今考虑一般情形，只需 证明： 对每 r > 0和 e > 0,存在有界、^连续的 
m /： U 4 IP ) 使 

E f (ft*-a t ) a . 4 (df)l <^ 2 . 

-九 . 

给定 TU > n, 取 a / > 1使 


E 



a ^4( df ); 如 > M ， 1 




再取 r; e C°°{R ) 使 
命 


,[mj € 以，[- i , m ]- 


_ 二 i](A s ) 2 A(ds)+t, r(t)^D- [ (t) ( 反函数 )， i ^ I). 

Jq 

(ft D(t) 定义中加 f — 项是为保证 D ⑴严格上升，从而保证了反函数的单调性 + ) 
则是有界停时的非减族.置 


戊= 〜⑴， （时间变换) 


由于 Z 3 有界、（安,）循序可测，因而由前段知 . 存在有界连续、（罗 V )循序可测的 

占使 

E 



最后 : 命〜 = 知 _( 4 ). 则 S 是有界、 u 连续的 LjjAJ) 中元.而且 


Ej 

* aT ■ 

/ (f>t - a t } 2 j 4 (d^} 

Jfi 

1/2 




^ E 

to w ^ 

r /r 1 

/ [ r M - 召邱 ) "( 4 )) 2 4 ( 出 ) 
Jn 

ip 


1 

L ■ 

r rT . 


■ 

"a 


r f T i 

^ E 

ii aUl ^ iAt)) m) \ 


+ E 

/ ^ t -p Dit) ) 2 V (A t fA(dt) 

Lt/& . 



§8*5 ltd 



ir>7 


t - r . I 1 / 2 

^ + E / {^t - ^ D { t )) D ( dt ) 

^ Jo . 


(因叫 = 叫] ( D ⑴) 



-+E 



■ +E 


{pD(t) ^Dlt )) 2 

丁 +M _ *[1/2 


1/2 


Jo 


e £ 

T + T - £■ 


□ 


= ^ D ( n ) 


§8.5 Ito 公式 


下面是比定理 7_6 更广一些的 It 6 公式. 

定理 8.14 (Ito 公式) + 设 X = ( X 1 ，… y ： |0, oo ) 


a ^ s . 连续、循序可测、局部有界 变差: 


\ y \( T ) 




ip 


€ L l { F ) 


VT > 0 


记 z - ( x , y ). 则对每 / e c ^( r m x m n } t 我们有 


M ,.T 


I ( Zt ) - f ( A ) 





(一阶导数关于鞅的积分) 



o 


dp{Z t )Y^dt} 


(一阶导数关于变差过程的积分) 


1 M f T 
1 r~^ jo 


二阶导数关于二次变差过程的积分，系数 


注 S .15. 当 y 三0时,右方第二项消失.进一步考虑 m 二1的决定性情形，则 


f ( Xr ) - /( Xo ) 





x 7 




dl 

dx 


(x)dx 


f 装 


( X t )dX 


这是经典的微积分基本 公式. 在随机情形，多了一个二次变差项 <，).换言之，在 
随机微积分里，随机过程不能只用一阶微分逼近.必需用到一阶微分.相应地， 
如考虑随机的撖分几何，只考虑一阶 向童场 不够， 因需要用到二阶微分，故也称为 
“二阶 的微分几何' 而决定性情形是“一阶的微分几何”. 
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作为随机积分的基本公式， It6 公式有无数的应用，仅举一例. 设私二 
- 5 B?) 为 d 维 BM, 则由 It6 公式知,对一切/ e C ^{ R d l 我们有 


/( SO "/( Bo ) = 


E f 洱 m)dB & + 





但 


货» = 0' (由独立性） 

故 rf 

m ) — /(Bo) = y[ 9 ff ( B s )< iB s + 1 f Af ( B s ) ds . 

由此立知， (/(S t )-^JoA/(B fl )d s ,^ t ,P) 是铁.这是前面曾提到、但未加证明 

的 BM d 的一种鞅刻画，以后还将给出一种更一般的结果. 

Ito 公式的证明记 {( X } X))M - : 1 ^ ij ^ M ). 无妨设 

t -石 (u；M 〜 ({ X } X ))( t ^) 对一切 w € fl 连续 s 而且/ e 心，.给定 

定义停时列$ 如下： 


坊三 0 : 

^ +1 =inf{t {(rm- (0(0)) V % - Z n . I > ^ 



则对一切 r > o 和 o ； e n , 除有限多个夕卜, # = 因此 

oc 

f ( Zr ) - /(^) = 53[/(^ + i )- /( 邱) L 

A：=0 

此处 

邳二(抑， 

留意 s(Y k \,) - 9(rn = I ： / ； F +1 d]g{Yt)Y j ^t ). 事实上，因 

j=l fc 




N 


( Xt )^^) 


dp 

df ， 


J 








祕卿0, 


§ 8,5 ltd 公 



此处 用到圩 有界变差+ 

因此，我们得出下述分解 


= + [/( wm ) — /(mi 


A/ 


M 


Y^dfm^r + ^Yl 吊 /( 邳) △以灶 m 



r ： 




此处 


M 


ryn 

K k 


E Wi^) (邳 


M 


Yu - a ^ x \ x ^ j ) 


。为（和 +1 ，}7)和 ( X ^ Y ^) 连线上的一个点. 
作为初等函数的随机积分，我们有 


觸 Apr 


k=Q 



dfnz ^ dx , 


此处 




邳 1 


如啡， A 】) 
如 t > r . 


因为对 EO , T ] 一 致地有 zp — z f ，可见 


oo 




L 2 (F) 


d!f(Z t )dXl 


fesrf ) 


0 


另一方面，依照通常的积分论 


0 C 


乙啤 /( 抑 ) AHXW 〉 


L \ P ) 


^0 



f(Z t )(X\P)(dt) 


f ： 厂 +1 考 WUWO ^ [ T d^f(Z t )YHdt) 

fc-o /o 
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我们只需再证乙丑卩首先 ; 


k 


i 吗 /( 郄 )- C[(AjjX *) 2 + (AgV) 2 ]| 々 ，-; 


因而 


E [(咩 /( 匈)- 


k 


^ 2 C t E [\ X T ^ Xo\ 2 ]/n (由正交性) 


与此 同时, 


oo 、 

k =0 ^ 


2 


oo 


I>[(%/(ZD(A]^ 舛 P - ^{X\X^))Y] 


fc =0 


^ - AUX \ X ^))) 2 } 


fe =^0 

GO 


^ C^E[(A^y+ (A^>) 4 f- (A^)) 3 + (A^)) 2 ] 


k-0 


(Schwarz 不等式) 


V f ； E[(A^) 2 /n 2 4 - (A ⑺) V + At(X l )/n + 的 ㈣ /n] 


fe =0 




oc 


^ C^E[(A]?r) 2 + (A^) 2 + A 狀 } + A^(X^}]/n 


fe -0 


〃史 E[|A]^f|> (由執性' 分解 ) (Wx 

知 =0 y 


A/ 




E (△#) 


C"E[|X r -X 0 | 2 ]/n (由正交性) 


oo . 


§8.6 局部鞅与半鞅 


至此 T 我们己经对于平方可积鞅 （xj 研究了如下三个问鹿. 


§8.6 局部鞅与半鞅 
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(1) Doob^Meyer 分解： X 卜恥 （鞭）+ ( X )( t ) (局部有限变差）. 

(2) 对于 C LL ((州，定义了随机积分和随机微分. 

(3) ltd 公式.即变量替换公式或复合函数的微分公式：^ 


M N 1 M 

J=1 ,?=r 1 i,j = l 

但这里的平方可积性要求太强，我们将它放宽. 

定义 s . ie .设％)右循、 a . s . 连续. 如存在停时列 〜 t w ■使得（ X 广:= 

对每固定的 n > 1是有界鞅，则称 （XA 如为 a,s. 连续局部狭『其全 

体记作 

设X e 则我们依然有 Dool>Me yer 分解 

1 

xf = M t ( € + ( X )( t ) (依然局部有界变差 )■ 

事实上，由 ( X^) 2 - M 广 +〈X〜)(f)- 我们只需取以八= sup n { X ^)( t ) 即可.由 
此导出分解的存在性.仿照先前的诬明可证分解唯一.然后 T 可定义 ( X,K ). 其 
次，对 a e Ll c ([ X }), 可定义随机积分.最后 . ltd 公式中的 / e Cf ， 1 可放宽为 
feC 21 . 

让我们转到另一问题:何种过程对(变量替换)运算封闭？我们己经 知道： 对 
每一个X G 有 

d/d) = f { X t ) dX t (局部鞍 ) + l - f / f ( X t )( X ){ dt ) (局部有界变差) . 

右方表明必霈包括两部分. 

定义 8*17 -称 Z = ( Z t ) 为 ai 连续半鞅，如果 Z 有如下分解 ： Z = X + K 其 

中 y 为右循、 a.s . 连续、局部有界变差.我们将^连续的半鞅的 
全体记作 H 


注 JU 8, 对于给定的 Z £ 夕分解 (X,Y) 是 a . s , 唯 一的.因此，可记 
(Z) - y. 类似地，对于给定的 Z,Z' e 可定义 {Z } Z f ). 进而，对于给定 

的满足下述条件的循序可测的 a : 


l o ^{Z)(dt)\/ Ki|y|(df) < oo, r > 0， a + s- 


可定义随机积分 



QidZg 



Oi 8 dX s + 
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此时 .It6 公式 成为: 





N rt 


^! m)dzi + ^ Y , 


2 


，j 



o 


^/( Z ,){ Z \ Z ^)( ds ) 3 a. S 


ZG _{^^ r ) N , f € C 2 ( R N ). 


§ 8 . 7 多元随机积分 

设 x = ( 义 1 ,… : x d )G {^y. is ((XX)) = 1 a j S 4 令 


Lj oc m ^))) 




: [0 : ^) xQ ^ R d : e 循序可测且 



丁 


(M<x, x))(dt)e t ) R , 


0 



T 


x))(dm 


o 


d 




_ 

J 



i 


e\(x\x^){dm 


0 


< oc, V7 7 > 0 


其中％是九的转置. 

在处理多元情形时，自然采用矩阵 和向量 写法.对于不太熟悉这些记号的读 
者, 可自己改写成分童的形式，习惯了也就更为自然.例如这里的倒数第3行的 
内积， 倒数第2行是其矩阵（向量）乘积写法,末行即是分童形式+ 


注意 


\ei{x\x^)(dt)0l\^ |^|{xy/ 2 (d0{^) 1 / 2 (df) 


因而 {{ X y X )} 非负定 + 进而 J ^9* t {( X , X )){ dt ) d t ? 0, a , s . 对于 6 


LjJ (( X . X))l 


{9,$ f ) ^ E 



T 


ei((x,x))(dm 


. JO 


成为 Ll c {{{ X , X ))) 上的内积（局部，即固定: H- 

注 8.19. 局部地， (^(^{{^X}}))' 可视为 U{( x ，柳 的稠子空间■事实 
上 任给 &G [L(((U ⑴：命则对一切 i ， 


E 



T 


Ol ( n ) 2 Tx (( X ^ X })( iit ) 


0 


d 


< n ^ E [{^}{ T )] 


< 30, 


§8,7 多元晡机积分 


17 ：\ 


d 


从而 0⑻ e ( z ^ c ( TW ( U 》))' 此外， 


||沒一 8(n)\\ := {0 - 0(n),0 - 0(n)) 


E 



(兄耶剛■■轉 


0 


0 


n —► c>c 


(逐点收敛加控制收敛定理) 


d 


对于 h 耶 ))' 定义 



T 


9 t dX t 


0 



T 


( Ot ^ X t )- 


o 



ei<\x 


o 


然后通过逼近手续，可定义出关于0 ^ LLm'm 的随机积分 
引理 8.20. 设 hiL ⑴ u ⑴， " e [ L ((( m 〉)， 此处 

则 ? ^r)(dO = ^{{xr))(cU)r^ 

证明当 h ( iLC ^( ⑻耶 ))' "e ( LL ( Tr (< y ， r )))) 时， 




J 



_ 


，/0 


^ dX \ / v j dY j \ 二 Y^ l h /V dKJ 



0 




d 


Y,^{X\Y^)=d^{{XX}h 


□ 




般情形可用极限过渡 > 


命题 8 , 21 , 给定 hi 乙则是唯一的使得 



« 


//dX) ㈣ = r t {(X,X)}(dt)r lh 叫 e LlMX.X))) 


0 


证明由引理 8.2 G 知 / = 满足上式.唯一性的证明要困难得多，需证每 

—个有如下表现 







见 Iketa-Watanabe [35]. 

其次，假设: [0, oo ) x S 1 



; ®K a 循序可测且 


E 



T 


Tr(a t {(X^X))(dt)at) 


0 


<00 
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则定义 〜X = ^ a t 6 X ( t)e ( Jf 广为 

(&, f\dx] = f a*edX, a.s, V0 ^ R Y . 

\ Jo 乂 1 

这样.在 R N 的标准正交基 { q } 下可表成 



^ e^dX 6fx 




§8.8 随机微分方程（高维情形） 

设 C 7 : [0, oo ) x R N ^ R n ® R d : 6 : [0, oc ) x R N -* JR ' (私）为 我们 

考虑如下随机积分 方程： 

Z^-=x+ f [ b(t,Zf)6t, T > 0. 

jo Jo 

形式上 [0, oo } xa ^ R v 可写成如下形式的随机微分方程： 

dZ 卜 <r(t 1 Z f T )dB t + b(t : Z()dt, = x. 

定理 8 , 22 . 假定对每 r > o , 存在 C ( r)<oo 使得 

sup 11^7(^0)11^3, v \b(t,0)\ ^ C(T), 

0 郎 T 

Slip — J(t T y)||H-s. V \b{t,y f ) - b(t,y)\ ^ C[T)\y f - y\ y y,y f e ^ (8.1) 

O ^ i^T 

(矩阵 A 的 H , S , 范数定义为 II 川 则 上述方程的解存在唯 一■ 

t：j 

证明先证解的存在性.使用迭代法.无妨设 s = 0, Z = 0. 命之⑼三(〕， 

= f T a(t,Z { t n ~ X) )dB t + [ T b(U zl n ~ i] )dt. 

JO JO 

再命 

A n (T)= sup |Z; n) -H r>0. 

oar 

先考虑 n = 1 时 A n ( T ) 的估计.以 q 为表 R " 中的标准正交基，简记 d = #•，())， 


§8,8 随机微分方程 （萬维憤形} 


i 7 r >- 


则 


E[l f T adB 


N r/ r T 

p[U ， 


2 






d 


1 



0 


v ei )，o 


2 


_ _ 


hk 


•j' 

f (a*ei)jdBl [ {a*c,) k dB 

0 Ji) 


d 「 / 疒了 

EE E / (“M 货 


2 


( 由 BM 的独立增量性 } 


EE 





_ 、— 

EE 





<it 





留意若把 j ( [a{u 7 c)dB u 写成 （ y 1 ， … ，⑼ ) ， K J W\ 

这依然是下鞅 . 从而可直接应用 Doob 不等式.于是得出 




E (^) 


EfA ^ r ) 2 ] 


类似地 


sup I cr(u,0)dB tl + 21E sup / |6(u,0)|da 

o^KT Jq J Lo^^r Jo 


^ 8E 


a ( u ,( i ) dB u 


2E T 


<8 E 



o 

T 



|6卜，0)| 2 如 


^ 2T 2 C(T) 


^ (8 + 2T)C(TfT. 


E[A^i(T) 2 ] ^ 8IE / \\a{UZ { f n 

)0 
r fT 

+ 2TE / \h(t } Z l t 


M n VaM 


- 1 ) 


H.S. 


d 尤 


n) 


^ {8 + 2T)C(T) 2 E 



- h ( tz { t n - l] )ydt 

■ 

Z ( M ) _ z ( u - 1) 2 ^ t 


^(S + 2T)C(T) 2 / ElA^tf} 3 ]^ 

Jo 
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于是，由归纳法得 


E|A n (r) 2 j 《 K(T) n /n\ 


此处 K{T) ^ (8 + 2T)C{T ) 2 . 因而 


sup E 

n^m 


sup |Z 


( 


2 ； m) i 


2 


^ sap E 

n^m 


r m a 

^ △ 狀 ) 


2 


^ £ EiAkiT^iT)} 









(e 叫 (r) 2 + E[A f (r ) 2 ] 产 




< 


E 


■ 1 


則 

kl 


k\ )/2 


由 Y^ akbk ^ X^ afc £ fejt 


k 


k 


k 


0, 


m — oo . 


故存在右循、 n 连续的乙使得对一切 r > 0, 


E 


sup 

- O^^T 


I 厶 - 氺 )l 2 j 


0 


n — oo 


今设方程有两个解 z t 和分别对应于初值 I 和:^则前面的证明给出 

A ( T )- sup %-吲满足（由（。+ 6 + #<3(« 2 + 6 2 +〔. 2 )) 


E[A(r) J 1^3|.7 ： ^yj J + (12 + ： \T)TC{Tf / E[A(0^]dt 

0 



T 


2 


于是，由 Gran wall 引理得出 


E [ A ( Tf }^^\ x - : cf exp [(12 + 3 T ， ) TC ( r ) 2 ]. 

特别地，当 : r = / 时导出唯一性. □ 

注 8,23. 文献 {18! 中，将条件 {8.1} 放宽为如下的非 Lipschit ^ 条件下得到过程的 
存在唯一性：对任意的 V - ^ < 1满足 

sup || 冲 ,0 )|jn Vj 咻0)| ( c(n 

O ^ t^T 

sup ||♦/ 卜也 y)|lH.g. ^ c ⑺ I〆 ™ y\M\y f 'vfl 

O ^ t^T 

sup |tKW) - b{t,y)\ ^ C{T)\y f - ylrdy' - y] 2 ), 

O^KT 


§ S .9 Feynman - Kac 公式等三个数学工具 


_ 177 ‘ 


其中 reCn ({ U )、 R + ) 满足 





a 如 

— — = 00, a > 0 
!> # ㈤ 


今设 o -( t , x ) = a ( x ), ； r ) = 6( t ) 与 t 无关.考虑方程 



T 


X T - X {) + / ^{X t )dB t + / 6(X t )df ， 

o Jo 


T 


其中 （£ ^为命 



T 


X T = X T - l h(Xf)dt€^l. 

0 


则 


({X x }) 



^(X t )dB u f\{X { )dBt ))=^(X t ) -a(X t ) 
0 ^0 


将 It 6 公式应用于 


F(X r , Y t ) 


_ T 

/(X T 4 - Yt). Vt= J 0(X,)dt /e C^(R S 

0 



得出 ， T T 

f ( Xr )- f ( x 0 )- [ Lf ( X t ) di = [ Vf ( X t ) dx t eJ^l 

JO Jt) 

此处 

N N 

i 二 3 办)％+1>卜)辱 

L tj=i i^\ 

故对每 / e C ?( fr v )， [ f { X t ) - 是铁. 这建立了扩散过程 

( A ) 与二阶微分算子 i 之间的联系.我们将在下一节回到这一论题. 

§8.9 Feynman - Kac 公式等三个数学工具 


Feynman-Ka^ 公式，随机时间变换与 Girsanov 定理这三种数学 工具， 乃是 
随机分析的三大“法宝”，有极其广泛的应用.这里，我们限于较基础的部分，以 
说明主要想法 . 更完备的结果,可参考[27, 47], 在本节的最后一部分，我们将应 
用于凸 几何, 给出著名的 Brunn-Minkowski 不等式的概率证明.这提供了概率论 
应用于几何、分析的一个范例. 

在上节末尾，我们使用随机微分方程,构造了相应于算子 

i = ^ 啤+ ^>(挪 

tsl 
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的扩散过程 （ X t )_ 其中咖 ） = (^){ x ). 下述结果给出了抛物型方程解的随 
机表示. 


定理 8-24 (Fteynman-Kac 公 式 ). 设 K e 4> e C b (R N ) r 假定 / e 

^^([O.ocJxK ^) 满足方程 



dt 


，- Lf + Vf ， 


/(0 ,-) 二也 


则 


f(t } x)=E x l<P(X t )exp 



V(X 8 )ds 


o 


,t ^ o, x e u N 


证明固定 f(j > 0. 应用 ltd 公式于函数 { Lz [ , z 2 ) ^ fito - ^ 

h ), 之卜巧 C ft 。） 得 


/(心 -^ JY^exp 



V ( X ,)6 s 


o 





t 


+ 


(V x f,dX s )e^ v ^^ du ds+ / /%-■?， 及 ) 不)山 
0 Jo 



0 



t 


{ V x f , dX ,) e ^ V{X - ) du ds ^ Ml ， 


( 8 / 2 ) 


0 


其中（兄）己在上节定 义过: 



t 


X t =X t - / b{X A )ds^^l 


0 


( fi .2) 式两边取期望，得 


/ (t 0 - t, A： t )exp 



V{X s )ds 


命 n h 由初值条件/(0, ) = <；> 立得所欲证者. □ 

—个简单得多的情形是 Dirichlet 边值问题，设 D 为的一个有界开集. 
命 

丁二 t d = inf{t ^ 0 : B t ^ D}. 

定理 8.25. 设 /eG(R") 濟 足方程 


A/ = 0 , 在 D 内， 
f ao - ^ 




则/可表成 
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m 二 0( y ) P ? ⑺(咖)， 

JdD 

其中 IPf ( r ) 是从1出发的首出区域 i ? 在边界次 D 上的分布. 

证明由于 

/ 叫-丨乂 Af(B s )ds 

是鞅 ，由 Doob 停止定理， 

亦然.这样 

/(;.) = ^[/(^ 7 )] = ^[^)|= / < p ( yW? r] (dyh □ 

JdD 

上述两个结果给出了扩散过程与偏微分方程之间的联系.其实，两者都是物 
理系统的刻画 i 前者是微观刻画，后者是宏观（平均）刻画.当然，微观刻画要精细 
得多、也困难得多.微观刻画的一个明显优 点是： 例如上述结果中允许区域 /) 
的边界3/3非规则，即允许非常粗糙的边界（例如分形集此外，系数 r 等 
的条件可进一步减弱，其光滑性要求弱于通常的分析条件 I 这说明为何概率论会 
成为分析学的一种重要研究工具. 

现在，我们转入本节的第二个论题 一 - 随机时间变换. 其实，前面在定义随 
机积分时已使用过这种技巧（本章第四节的末段).此处再提供一个例子^ 

我们知道，对于给定的非线性光滑实 函数人 过程不再是 BM , 下 
述结果相当奇妙,它表明复空间比实空间有强得多的“刚性 ' 

我们称尽=玛+ 爯为（标准）复 BM， 如果⑻）和⑻）是相互独 
立的 BM. 回忆复函数 f 二 u + 称为解析函数，如果它可展开成绝对收敛 
的幕级数.等价地，/的实部 u 和虚部 r 满足下述的 Cauohy^Rifijruinn 条件： 


= v y , = -v x . 

命题8.2匕设 (5 t )^ 0 为标准复 BM , /为解析函数.定义^为方程 

广 \f(B s )\ 2 ds^t y t>0 

Jo 


的唯一解 、则 也是标准复 BM . 
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证明因为/的实部^和虚部"皆为调和函数：二 o T 加= 0,由 ltd 公式得 


dv(B t ) = v x {B t )dB ] t + v y (B t )dBl 

这样， t t 

{u(B)) t = {v{B)) t = f (ul + ul)(B 3 )ds f \r(B s )\ 2 ds. 

Jo Jo 

( u ( B ) MB )}= 0 7 

得出所需断言. 口 

更一般 地，如4 e 方 (R， 满足 

« 

0 < r , ^ ^ C2 < oo : 


则可定义随机时间变换它是方程 

广 ⑷ a ^ 

i W 7) ^ ut> 

的唯一解.当系数 a —致正定、有界，& = 0时，扩散过程（足）可经随机变换 
TfX 1 化为布朗 运动. 详见参考文献 {57, §6戽 

对于一般的扩散过程 {X t ) t ^ 0 , 其算子 L 的一阶项的系数 b 若非零 T 可通过 
一种测度变换将它变成零.这是本节所要讨论的第三个主题一 -Girsanov 变换, 
此处只处理一种特殊情形. 

设 r < 00,令 


= {^ ; u；o = 0, U) t 在 [ O/j 上连续 h : a{oJ 9 : s ^ t ), 

因为轨道 a . s . 连续, 可将标准 BM n 视为定义在(听， (^° Mo , t ]) 上具有 Wifiaei 
测度 P 的随机过程 （A = 限于 r < oc 的好处是 f ) T 依一致范数构成 

Banach 空间 . 

以下固定 r < oo . 给定关于 (^}^ [0 , zi 适应的，取 值于， 的随机过程 
(叫 WlQ.T 卜满足< 00 , a.s ■及 E p Zt = 1 3 此处 


Zt = exp 



t e [0, T ], 


在资 T 上,可定义如下测度变换 （Gir S aiK>v 变换) 


dQ^= Z T dP, 
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命 

Bt ~ + I n s ds . t £ [0, T 1 ]. 

定理 8,27 (Girsanov 定理)， ( B t ) te[{}Tl 是定义在上的 BM 八换 

言之 t 在 Q 之下，（或）在 r 之前的任射有限维分布重合于（玖）在 P(Wiener M 
度）之下的相应的有限维分布. 

证明此处只证 iV = 1情形，高维情形留作习题.命 

rjt = inf ： j ^ - 

则由 ltd 公式易知 (^ Ar J ^ (0 iT ] 是正的连续鞅.因此是连续周部鞅.由 
EZ t - 1知它实质上是鞅. 

为证明有限维分布性质，由于布朗运动的增童独立、正态、只需对于形如 


F ( x # ) — 6 xp 


m-l 

j =0 


Aj e R , 0 = ^ < ■ ■ ■ < ^ =- T 


的函数 F 诬明 E p [ F ( B ) Z t ] = E P F ( B ). 为此 3 先证明对于每一对方 d (S 和 


EpfexpjV^-T A(B^ - S s )]/iZ^] = Ep[/i^r] ^xp 


A 2 

T 


- s ) 


这可以由 It 6 公式 导出: 


Ep | e v ^ TA (^ _5 ")^ Z T | 


Ep l Ep 


e 


v^TA(5 广 J u r dfi r -^//nJdr|^0 


_ 


iEpf / l ^ T 1 ] — 


A 2 



Ep 




e 


U f ^r) 


d(J 


将左边视为 f 的函数 > 它重合于右边第二项的被积函数，这是一个筒单的积分方 
程,其解正是我们所求的. 

对于一般的 K 将上述结果应用于 


m — 1 





t.r + l 




h = exp 


m 
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得出 


m-l 


Ep I exp 



Z T 


Ep s e 


jrrl) 

私 Tri m Bt 


^ Zr ] 


E ? [/i2 r ]cxp 


fn +1 


递推下去，最后得到 


m — 1 


Ep[^(B)^] ― E (^7 } exp 




5=0 


m— l 


exp 


5 Z a j ( 


j+i 


tj ) 


j=o 


E P F ( i ?). 




现在，我们使用上述结果，给出一种简单扩散方程解的变分刻画，同时也为 
研究下~个论题作准备■设 tr 为正常数， c.f e CVJRl inf / > 0.考虑 Cauchy 
问题 " ‘ 


dv 


Ai ； - — c ^ v , f > 0, j tE M ' 


dt 2 a 2 v ^ 
v(0 7 x) = f(x), x ^ M n . 


经变换 V 二 

Cauchy 问题 


a 2 logv, F 


(7 2 log /, 化成 Hamilton - Jacobi-Bellman 方程的 


dV 1 a 2 

百 + -\VV\ 2 -c(x) = yAK tXlxGR^, 

1(0, 工） = ^(^), j ： e M n . 


命 二 a + (jB t , Z > 0, 则 Feynjuan-Kac 公式给出 


y{t,T) ^ 心 ( t ， a ^) = E P i oxp 


F ( Br ) 



t 


(o 


此处 IP 为 Wiener 测度. 


下述结果进一步给出了 的一种变分公式 


命題 8 .28•以欢 ( T ) 表示所有有界，循序可測过程 ( u t ) t ^ T ] 的全体 ，假设 
c } Fg C f f ( l n ). 对于每 uG 汝(7 1 )，命 


t 


h { t ) ^ h u { t ) 


u s ds , t e (0. T ], 


o 


= ^F(Br+h^{t)) + ^( c ( B ^+ k u ( s )) + ■ 
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则 


v 【 JT ， x) 


exp 




篇⑼” ) 


r > 0, ；r e M n 


证明记 


义二 ； C W + M 4 fe [ o，n 


Y t 7i = F{X0 + 



I ) 


+ -|w 


s 


t 

ds + a / t e [0 ? T\ 

0 



对于 clQ = Z r d ¥ 


Zj — oxp 


T 


2^ 2 Jo 


u $ 


2 ds 


G 



s dB 8 


0 


和非负可测函数也由 Girsaiiov 定理，我们有 


f )Q(du；) = [ ^}IP{d^). 

Ju T V a / Jn T 

留意珲/ 经变换玖 = 叫 — 叫 + h(t)/a 成为 z + rr(B t + h{t)/<j)^B^ + h(t) = 
X fl 得出 


「 


t 7( r , x ) = Ep exp 


G 





T 


c ( B ^ > : ( Feynman-Kac 公式) 


EiQexp 


1 


<T 


2 


F{X r ) 



0 


T 


c(X t )dt 


,/0 


TEp exp 


a 


2 


\ru 

I rjn 

■ 


(由 Q 的定义) 


这样 T 由 Jensen 不等式得出 


\ogv(T : x) ^ ~^E F r 7 u 

对于固定的+若匕几乎 处处为常数,则此不等式成为等式 1 换 言之, 我 们通过 
选择 Girsanov 定理中的函数 rj , 使得儿乎处处为常数，以此来优化 v ( T , x ). 
为此，命 

u{ux) ^ -w(r - 1 ， 斗 t e !0, r ]， 

则 c 和 F 的有界光滑性将保证 I 7 (M 的 LipschiU 性.因此，方程 

dX - U ( t , Xt)<it + adB t , te {0 } r],Xo = T 
有唯一解,取 m [0,21 那么 


Xt — — x + B t + / itj ( f ) = 5 ^ 1<T + 
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与前面所用的 记号义 一致- 
考虑过程 

bV(T-t,X t ) + J: (c(X,) + ^ 

则由 It6 公式得 


r/ 5 | 2 ^ ds + a J T} M dB H . 


d6 t,X t )dt + W(T 一 IX,) ■ (r it dt + adB t ) 

+ yAF(T - UQdt+ ^c(X t ) + 出 + athdBt 

=- — V{T-t,X t )dt-r}f + frd^) 

+ fAVXT — + (c{X ⑴） + ^(| 2 ) dt + aTHdBt 

. 2 1 
=-^K(r-^X,)-i|VF(T-t 7 X # }| 2 + ™AV(T-t,X,)+c(^) dt 

Ot l I 

■ — 

= 0 ， a.s. t ^T. 


最后一步是因为 VXT^a:) 满足 Hamilton-Jacobi-Bellman 方程， 这样， fr = 几 

乎处处为常数 + 由此并注意 EpJ^wd 扎 =0得出所需断言. □ 

现在转入本节最后一个论题，即凸几何的一个重要不等式.以下设0 二 
( 0 ^, 9 ^ G R 2 为一正向量.对于 G M 71 , 令％ = ^u^o + ^i^i- 对于给定的 
的子集4和 l2 - { x d : x 0 e A ^ x x e Ai}, 也写成 A = 6 0 Aq + 

以 V n ( A ) 表 4 e ^( R n ) 的体积 {Lebesgue 测度则著名的 Brunn-Minkowski 

不等式为 


V n ( A 0 ) > ^(如)〜仏(山)\ 〜 + Ao ^ A ^ 省 ( R n )」 （? U ) 

此不等式有若干等价形式 


Vn(As) l/n ^ 0 o Vn(A o ) l/n + ( 8 * 4 ) 

9 0 +9 ^h 

这些等价性的证明都不难.例如说，使用算术平均-几何平均不等式，可由 （8.4) 
导出 (8.3), 反之，在 （S .3) 中取烏= V ^-^ A !, 和烏= K ⑷疒❿札则 
其右方等于 1. 再取 

0_ ^( A ^ + K . K ) 1 /^ 

那么 （8+3) 的左方成为 


V；, 


馮+ 4 

V n ( A f 0 )^ + V n ( A[)Un 


⑽ + 4) 


这就得出 
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V n (A f 0 + A[f n > 仏 (4;)〜 + 

最后取％ =心冯和 A ! = G . Au 便回到 (8.4). 关于此不等式研究的丰富内容和 
诸多新进展，详见参考文献 [2 斗此不等式之所以成为凸几何的基本结果，是因 
为最早发现此不等式时，假定和皋均为凸集，那么4是洳和 A 的凸组 
合+ 

下面，我们需要用到一种函数不等式.设 AG = ( U ) 为 ET 的子集 ， & q > 
0- 命％ = ^ f]^o 4- 我们考虑函数 A : D ^ M(j = 0,1,0) 满足如下关系 

\ Q 0 

一 < h ( x & ) ( '-^■0 o ( : r o ) + —^-0 i ( tj ), £ Do , € D \. (8.5) 

a o 

下面是这类函数的三个例子. 

⑴ j 0 = q 為 + 5 】二 1 ， 


(2) <pj = V J Ji 也》 0, j = (^ 1 ，沒且 

^(%) ^ ^o^o(^o) + x 0 e Dq, € Di. 


⑺ A = j = 0，1』，朽满足 


M ^ b ) ^ M ^ g ) + e e Dj 


为验证后两种情形，可考虑函数 

7a (\。） = A^ 1 /^! A > 0, tr > 0. 

它是一阶正齐次的： ^ a ( cA , oj ) - c 7 a { A , cr ) 1 V c > 0,当 os 二 1 时，它是凸的， 


入\ 


Hess (7 a ) = a ( o ; + 1) 




cr a 


<j 


A 


a 


A 2 


下述结果是参考文献 [3] 的主要定理. 

定理 8.29 .设> 0, q 和 Fj(j = 0,1,^) 都是有界连绫函数，并对一切 
x ^ x { e K n 满足 (8*5) s 则对于一切 eR 71 和 Ao , A \ e 义 (R n ) ，有 


v ^ f ；( T ^ e ) > {々《°(7>。)广〜 {<$(2> L ) 广 1 、 
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其中％ ， + 而 

< f ( T , T)^wF (吨 啡、 } 


作为定理8,29的简单推论，设％ + R qa , 取〜二 qQ 二 

()， A = 厂1 = 5 = 0 ( 即/；三 1)， : r 0 = h = 0,得 

E p 卜 ㈣ ’)卜 { e p 卜，(啤)]广 1 { e p 卜吨” ]}' 

当 T =_ 1时，此即是 

/ e.^^dx > I / e~^da：l ' ( f 

Ja () i Ua 2 j 

命 ct 一 X ：. 得出第一种形式的 Brunn - Minkowski 不等式 ( S .； i ), 我们 注意， 后者 
是前者“高斯型”不等式的极限情形+ 

稍作改动、假定 /. 7 ( j = fU ，) 满足 


^ /。(:^广 /办1 产，工0, n 6 r ■ 
无妨设/,有界.严格正，则由定理8,29得出 


fo{x)e~^dx^ ^ / f 0 (x)e ^ dx 

Aff V J 




41 


a 


h [ xyr'^&x 


再命 


(7 


. 得出 Prekopa Leindler 不等式: 





形式上 3 这是一种反向的 Holder 不等式，此不等式也等价于 Bruim-Minkowski 
不等式，因此可视为函数形式的 Brann-Minkowski 不等式. 

定理&29的证明 a ) 先证明< = vfy 的特殊情形.使用光滑函数逼近.无 

• • 

妨设 c，F e C ^{ M n ). 给定 g ^( T ), 命仙 = & 0 u 0 + Aw ■记 - 

Bf 〜 〜⑴，则 = x fl + 〜 B ( t ) 二 + 心杧 1 .' 


=B^ ^+k u , {B x ^ + k U[) ) + & 1 (B^ ai +" 〜) 



§8.9 Ffeynman-Kac 公式等三个数学工具 
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由于9和 A (j = 0丄⑺满足条件（8.5)，使用上述第二个函数例子 （A = €情 
形)，取办= \ uj\{j =0，1，朽，得出 




F e ( X ? 1 







^0 


Fo(X^) + jf 卜 (O# ⑷ P ) ⑴ 




巧(0乂了卜 (d 


l ^ i (0 n df 


两边取期望 e ' 得 


( WU r A ， f >) + V<\ Cl ( Ui … i )- 


留意 


cr log 心 (r ， x) 


inf aJlt.x.u), (命题 8.28) 

e ^{7) 


证得所述断言. 

b ) 现在证明一般情形.由 Lebesgue 测度的内正则性 i 对于每 B e 
存在紧集 K C B 使得 V n (B\K) 任意小.因此，无妨设4和山为『的非空 

紧凸集 了 给定 e > 0,命 d(x,A) - jnf{|x - y\ : y G e W 1 , = {x & W 1 ： 

d{x,A) ^ e}, ^ l a ( x ) = min { e , d (^, i 4)}, x e R n . 再命 


<7^ min 


in 以 k 




6 


那么容易验证 


X ❹。(坑 


由己证的 a ), 








( T , x 0 )} 


V ,；,： 见 A ) 


Xqj X ^ € K n , t ^ 0, m ^ 1. 


注意在 八/上 = 0 ( 在烏上 ， A = 0)， 而在> 0的区 域上、 当 m — 00 
时，被积函数趋于 7 零，这样，先令 m — 00,再令 e 1便得到所霈的不等式. 

□ 

最后，我们指出，虽然 Brunn-Minkowski 不等式是一个纯粹的几何结杲，不 
涉及随机性，但这里所介绍的概率证明井没有用到多少特别的几何知识. 
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作为本节的结束，我们介绍 Prekopa - Leindler 不等式的一种更为直接的证明 
(取自 [22 J ), 

定理 8,30 {Prekopa-Leindler 不等式 ) * 设入 G (0,1), f ， g，h 非负 Lebesgiu' 可 
积，满足 

k{{l - A)j: -f Ay) ^ f(x) l ~^g(y) x , x,yE R 7 \ 

I h(x)dx ^ f / /(x)d,x ) ( / * 

证明 a ) 先证明一维 情形. 由齐次性，可设 

//: f n 

-/a Jr 


定义 w ，”：（0,1) — R 为满足 



的最小数.则 u 和 t ? 严格上升,从而几乎处处可微+命 u ，( r ) =(】 - X ) u ( r ) + Xv ( r) r 
那么 f ( u ( r )) u f ( r ) = g ( v { r ) W ( r ) = 1 T 进而由算术平均_几何平均不等式： 


w f (r) — (1 -- X)u f {r) + Xv f (r) ^ ii / (r) 1 ^ A v / (r) A 
= / W ( r )} A _1 p ( u ( r ))-' 

倘若 # 0且 g(v(r)) ^ 0. 因此 

/ h{x)dx ^ f h(x)dx^ f / t (^( r )) tj /( r)flr 

/R yRange(^) Ju 

> f /« ， )) 卜 \(1 ，⑺ ) V ( 以 (r)) A Mp(”(r))-'dr = 1 ， 

Jo 

其中的第二个不等式是因为对于一般的增函数 A 我们仅有 

广 

/ w f (r)dr ^ w(r^) - w(r\) 

而非等式，这相当于 h 为单个区间的示性函数情形，对于一般的仏可用简单函 
数 逼近. 

b) 高维情形使用归纳法，固定 s e R , 定义 / s : R n ~ l ^ ( O . oo ), 八⑷= 
u(x.,s). x e R ^ 1 . 类似地定义如和这样 } 如果 s = (1 - A > 0 + 
s 0 , si G R ? 则由假设条件知 


h^[{l~X)x + Xy) > / 30 ( x ) 1_ A 3 3] ( y ) A , x,y&R n ' 



于是由归纳假设得 





将左方视为 S 的一元函数，将右方两项分别视为 M 和 h 的一元函数,化为一维 
情形.因此由 a ) 得到 



定理 (8.30) 证明的关键是引进“变量替换” ti 和通过这两个函数，分別 
将分布 / cb ; 和分布如 x 与均勻分布耦合在一起.这种方法也适用髙维的欧氏空 
间，只是要困难得多.研究这种映射的存在性、正则性以及各种应用，构成了当 
前偏微分方程和凸几何的一个重要研究方向. 


定理&30所述的 Prekopa - Ltiindler 不等式比之前所证明的要广.因为先前 
要求和/ I 有界连续.然而通过适当的逼近程序，可证两者等价. 


§請补充与习 


1 



(分部积分公式）经典的公式如 次：设 /， s 右连续、非减的实函数,则 


(fg)\ 



/( x ) dg ( x ) 



y{x-)df(x) 


其证明不难: 


{m-f(a)){g{b}-g{a)) 



I d/(i)dy{y) + If df(x)dg{y) 

/ d/(x) + / df(x) f dg(y) 


My ) 



f{y)dg{y) - f{a){g{b) - g(a)\ 



9{x-)df{^) -g(a)[f(b) - / ⑷] 


试证随机情形的如下分部积分公式.给定 

X t =X 0 + Mt + U t . Y t = Y Q + N t + V^ 

此处(⑸和⑺）为连续有界变差过程,= % = 0,则 


f = XtYt- X 0 r 0 - / Y t dX t - {M,N)(T), 
o Jq 
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2. 给定停时 r 和 Xe 令 

~ -^£Ar 1 ^ ? 0 (停止于 T ， 即从 T 开始停止不动). 

% : X t -X ;， t^0(r 之前改为常数零 L 

试证： A ' 且 

( 严⑽ ={X)(tAT)^ ( T X)(t) - (X)(t) - {X)(t^T) : d 

提不： 

⑷设 O s , 则 

E[X tAT (X t , iT - X t }\^ s ] 

— — s ] + E [^ fr > s ]^ A 7 -(^tAr ~ 入 f ) l 少 5]. 

右方第 1 项 = X T 2 J ( 吻广 

=X T (JVV ■"■ X^)/[ T ^ 3 ] = X s 八 - JQ )， &.s. 

右方第 2 项： I [ r > s ] E [ X t ^( X ^ T - X t )\^, AT } 

- I [ r >,] E [ E [ X , Ar ( X tAr sat \ — a . s . 

故 [ x t M Ar — Xt ), r u ¥) 是鞍. 

( b ) 为计算 （ T X> ⑴，使用 

x tAr ) 2 - X, 2 - x 2 而十 2X tAr (Xt^r - X t y 

3. 给定和停时 r 试证 

此处= Uf)(X，y)(d$ 其次，命， f 二 必 ： 0 ^ 

= ^{n ： 0 < ^ t ). 试证： X,Y e ^ S 2 c ((^f x，r)， p ); 可能 
相差一个 P 零集，关于 x ^ llF ) 所定义的（又>0重合于关于 
((^th P ) 所定义的 ( X , y). 最后，若对某了 > 0,叉 f 与貪 r 独立 ， 则 

{X.Y){t} = 0, D ^ t < T, 

提示： 因 xy yx r } 是鞍,所以 ( xry -{ x , ry ^ x ^ y t -( x , y) t 也是 
鞔 为证 x - y -{ x , y } T 是轨只需证 x -( y - y ^) 是戰. 但当 时， 

E [ Xl ( Y t - Y t T )\ Jr 3 ] 

= E[/ lr ^ s] X T (y t ^ W)l， s ] + I {r>s] E[Xl(Y t - Y t f ㈣ 

- 小訓 X r (y fl -r T ) + j ET>sl E[x t T (y t ->7)|A AT y jAr ] 

= X ：( Y S - Yn ， a . S , 



§ e . io 补充与习鹿 m 

4 ■给定 Xe ^ l 和停时 c < r . 设 0 e 满足 

Efy ■ ({X){T At) - (JV){TArr))] < ■do. 

并命 o 二/ [^ r )7. 试证 ： n e L ^ 0 C (( X ) : F ) 而且〜 Jt 存在并等子 t ( A ^ t (*) 
PM ). 

提示：只证后一断言 . 分三步. 
fa ) 设 iZ ^ e . S'l z 。 二 a 贝 IJ 

{ z,yy - o , vm ^ 

n:) z a v - o ^ (z a ,Y) = o 今 [z, vy = o 

^( Z , Y ), = { Z , y ) tv „ 


( K ) 如 t 则 ( yZ ' Y) t = {^ ZX}ivo - l { Z 、 Y) t w 事实上, 


E ;：. Z , v ^ r , v ,-^{ Z . r ) f v ,|^ 


V<T 


7 K [ U Vcr -仏 iv a | 义训 1 
T [^ V / t ^ V(T "~~ i ^' Y ) ' n 


( r ) 今取 Z = - X ' 则 

(7 (x t - X”X}”.(X T ‘ X'y 卜 a.x'y) -. (X^V)} 

= 7 ((aut .urn. 

(MX T - x^)X)(dt) --- 7 ((x ， yr(dt) — {xxrW} 

二(叫 - ( 叫 ) 

.二 ux ， y )( dt ). 


5. 给定 X c M \ 

( a ) 被积函数的局部化的积分等于积分的局部化，设 cr < T 为停时 , n ^ 
UlJ { X ) J \ 试证 1 I^at e LU ⑻， P ) 且 

/'Tat jT i^Tat rTAcr 

I o ： fd^( = / r ^Qf.d^Tt — / — / Ojdj^Lt ， <\.^- 

Jt 初 J(\ Jo Ji) 

( b ) 随机积分之微分-设 3 e Ll c ({ X ) : F ), aeL ' l ^ iX )^), 试证： 

J 吹 j /%dX^ j ^ J a 9 fl s dX s , a.s. 
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提 示：⑷ 中的等式只用到积分的线性性. 



T 


0 


7* 

^.T)(*)^dA^ = f (/[ 0 、 T ) ⑴中一 ⑴) 




0 

T 〆 

々 o ， r) ⑴〜 dX t - / J! D r) c^dJV: 

o Jo 

TAr j*Tat 

- / Q*dX{_. 

0 Jo 


其次对于 （ b )， 注意到 vy e 


• 〜 d ( 乂 w /3 s dx s ),rj) ㈣ =m(y 。 0 g dx^Y))(dt) 



0 





aA { X : Y )( dt ) - {{ / a v 0 u dX U } Y ))( dt ). 

o 


故由唯一性即得断言. 


6.设 X 与 a 如上. 再设 1" e {^ly y r : [0, oo ) x fl — ® M e 满足类似条 


件，试证: 





(a) / [a, r] d 

o 


X 

K 



jdX+ j rdV 

o Jo 


* 


(b) 《 / adX，j 7 吖〉卜冲 )((^ 〉 ( 叫卟)'此处 

0 Jo 

({X f V)) = ({X\Y^); 1^ “ 

( c ) 试证 /； adX 是唯一的 F e (义〗广使 F (0) = 0 且 


X 

Y 


X 

Y 


(dt) 


(T(t) 


(^ X ))( dt ) f / t ^)* l > 


此处 J 为单位 方阵; 


a.s 


( d ) 设 t : [0, oo ) x Q ® lft ' 循序可测， c 以及 m 都满足前述条件 



T 


IV ( 冲 ㈣〆⑴) 


< 00, 


vr > o . 


则 



0 


•都 [I 


t 


crdX 


) = i 


r < rdX } 


a.s 


提市: 


S 8.10 补充与习题 193- 

(a ) 依定义 _ 

(0 T = f (<r*ff)dX, V^gR jV . 

Jo 

这样、对沒 e R' 



因此 t 只需证 

厂 d X = r a *8 dX + 「 r * MY . 

Jo r*0 l r Jq Jo 

■ L ， 

当 〆 (? 和属于的特殊情形时成立.然后用极限过渡得出 

一般情形. 

0>)仿前面 关于批 的证法 可证： 

{0. X , ^)=8(^,¥})^ 

现在，对一切 PeR -' 

〈乂 a * 縦丄 r*6dY^ (dt) 

取沒为 K " 的基，井利用# J ；^ dX ) 可算出各分置. 

( c ) 先证 Y = 满足等式，因为 

- n v ^ ^ ^ 

X X -厂 f d X 

yJ = [/> dxJ = 7 o Uj [ y / 

_ 

于是等式由 （ b ) 导出.往证唯一性 + 由上式得出 

((y.x))(df) = r7(0({x.x))(do. 

写出分童形式 


( rw) ㈣ =^>训(#/>_. 
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- …… — * I ■ I ■■ ■■ " ■ 1 圍 . . . ■ 

但〈户， /； % d ^)( dO - 純 )(1 (叫故有 

(y\ j: n—idt) ; aumx.xy/^m- 

然后使用上节的唯一性得出 

= f K f (t)dx t . 

Jo 

进而 

-〜 『爨 N f ， 

(^y) s ,v-^r= / Ta^mdX^ / (^(t)6)dX r 

Jg t =i 7 o 

故 r = / 0 V ( i ) dX t . . 

7 + 证明髙维的 Girsanov 定理（定理 8.27 中 iV > 1 的情形 y 


这里介绍一些进一步的读物和本书部分题材的出处.由于本书的多半题材 
都是经典的，我们未能认真地考察历史，给出所有结果的原始文献，而只是给出 
所参考的 书籍; 对于那些较新的材料，当然需要指明所用的原始文献. 

(― ) 进一步的读物 


• 关于随机过程的基础性读物，国内已出版多部优秀教材。例如 tmij (:也 见 

[61] ), [32], [26], [43], [49), |5 f ) j , [24) ? [ Mj , 此处，我们也列举几部有代表性的 
英文版 教材： [401，[2礼|4外13礼[2〗1.从这些著作中，读者不仅可以找到 
同-题材的更加丰富的内容或不同的处理手法，而且可以找到不包含在本 
书之中的更为广泛的题材.还有一些结合工程、公共服务行业、医药、牛 
态、金融、计算机科学等专门领域的随机过程教材，因为为数不少且笔者 
不完全 熟悉， 故不在这里一一列出， 

• 关于马尔可夫链或更一般的马尔可夫跳过程的现代理论，可参考研究专著 

[62] , [29], [30], [31], [67], [5], [10], [16], [1], [45]. 

• 关于随机分析的现代理论,可参考研究专著 [64], [27], [6札[35]4叫1 


读者至少可以浏览这些著作中的若干部或若干章节，以领略现代随机过程 
理论新发展的部分 景观. 对于有志于研究随机过程理论的读者，则需要精读其中 
的一、两部专著.在下一部分里，还将给出若干章节的进一步的读物. 

(二） 所用题材的注记 

先看第一篇. 

• §1.1 取自问.也见 [ llj . 注 L 7 所述的对于搜索引箪的应用，参见综述报告 

141 ]- 


• §1.2 和 § L 3 基本上取自[60纟关于遍历性的耦合证法取自间和丨 49]. 
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后 记 


• $4取自 ⑸和 [101, 最小非负解理论的系统研究来自 @)1. 

• §13主要源自1圳. 

• 基本上都是经典的，原始文献可在间，[10]，|2卟[ 4 9]或前一部分中所列 
的关于马氏链的专著中找到，稍近一些的定理 2.9 可在问或 [10] 中找到. 

• §2.2 定理 2.12 来自[5] + 定理 2.14 的充分性属于 Router [52]; 必要性厲于 
[29]; Tweedie 的结果来自㈣].关于遍历性 : 虽然问中已处理过一部分，但 

较完整的处理取自[：»斗 

• 码.3不包含吸收态的单生过程在间中已详细介绍过,但其中关于含吸收态 
的断言失误 k 此时的完整处理来自 [7J. 

• §2.4 分支过程是许多教材都要讨论的1但扩展的分支过程的研究则要晚得 
多. 这里的材料取自 如]. 

• 抑 .1 除去定理 3A 而外,本节材料取自|1斗定理 3.6 属于丨4斗本节的内容 
可在 [5] 或 [10] 中找到. 

• §3.2 的结果是陈木法在一系列论文中完成的.谱隙估计及相关论鹿的研究 
是当前活跃的研究方向，详见 lllj 和卜 59j. 

• §3.3 是为初学者写的通俗介绍，系初次发表. 

• §4」和取材于陴1,关于了前^代数的定义的详细分析系初次发 
表. 

• 最优停止问题是概率论的•个重要分支,有许多重要应用，参 见丨站 1+ 
再看第二篇. 

• §5.1 -§53 取自 164], 也见 [27}. 的第一个例子取自|17]+第二个例子是 
敎方法 M 的典型应用，它的好处是同时适用于本书未涉及的非时齐情形， 
这是博士学位论文 171] 的主题. 

• 妒.1-§6. 4 基本取材于 [M]. 

• ^7.1 -§7.3 取材于 [47] 和[叫 

• K .4 定理 7 H11 取自陴 ]■ 定理 7 . 】2 源子|1礼其分析证明取自岡，末 
项断言是由 [9j 得到的改进形式+ 

• 明.1 -沾取材于庐叶 


后 记 \\)7 


卟 .9 中所述的三种数学工具是每一本随机分析的书中都要讲到的，命题 
虽然 简单, 但却是当前随机共形理论研究的出发点、参见综合报告卜问.定 
理 8.29 属于^ 定理 8.3() 及更多的几何应用.参见综合报告 f 2 轧 
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